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内 容 提 要 
本 书 主要 内 容 包 括 :概率 论 基础 知识 ,随机 过 程 的 概念 和 基本 类 型 . 泊 松 过 程 .离散 状态 和 
连续 时 间 马 尔 可 夫 链 , 著 和 布朗 运动 .随机 分 析 等 。 
本 书 尽 可 能 地 简化 复杂 的 抽象 证 明 或 推导 ,主要 突出 知识 的 应 用 教学 与 学 习 ; 叙 述 通俗 , 简 
明 且 例题 较 多 ,并 给 出 了 章节 习题 的 大 部 分 参考 答案 ,便于 读者 自学 参考 。 
本 书 可 作为 高 等 院 校 工科 类 以 及 管理 ,经济 与 金融 类 人 研究 生 和 高 年 级 本 科 生 的 教材 ,同时 
也 可 作为 广大 从 事 相 关 专 业 技 术 研 究 人 员 的 参考 或 自学 书籍 。 
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随机 过 程 理论 是 现代 概率 论 中 的 一 个 重要 分 支 , 在 生物 ,物理 .系统 工程 .管理 
和 经 济 等 领域 都 有 着 广泛 的 应 用 。 目 前 国内 大 多 数 高 校 大 都 在 工科 .管理 和 经 济 
等 相关 专业 开设 了 应 用 随机 过 程 课程 。 本 书 是 编者 结合 多 年 的 教学 经 验 ,在 自 纺 
讲义 的 基础 上 ,根据 教学 课时 的 安排 及 工科 等 专业 研究 生 掌 握 概率 统计 专业 基础 
知识 的 程度 ,以 及 全 国 工 科 院 校 硕士 研究 生 应 用 随机 过 程 课程 的 教学 基本 要 求 而 
编写 的 。 

本 书 在 内 容 的 选取 方面 , 既 涵盖 了 随机 过 程 基 本 内 容 、 基 本 思想 和 基本 方法 ， 
又 通过 典型 实例 的 分 析 ,重点 突出 了 知识 的 实际 应 用 背景 , 旨 在 培养 学 生 应 用 随机 
过 程 的 理论 与 方法 解决 实际 问题 的 能 力 。 同 时 , 尽 可 能 地 简化 某 些 结论 的 抽象 证 
明 ,突出 主要 知识 的 讲解 和 应 用 ,以 期 满足 学 生 掌握 运用 知识 的 需要 。 本 书 大 致 分 
为 五 个 部 分 :概率 论 基础 知识 以 及 随机 过 程 的 基本 内 容 ( 第 1 章 、 第 2 章 ) , 泊 松 过 
程 ( 第 3 章 ) ,马尔 可 夫 过 程 (第 4 章 、 第 5 章 ) , 著 和 布朗 运动 (第 6 章 ) ,随机 分 析 
(第 7 章 )。 
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生 、 本 科 生 随机 过 程 的 教学 工作 ,具有 较为 丰富 的 教学 实践 经 验 。 同 时 感谢 周 树 民 
教授 对 本 书 书稿 的 编写 给 出 的 详细 指导 和 修改 。 
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1.1 随机 事件 及 其 概率 


随机 试验 是 概率 论 的 一 个 基本 概念 . 一 个 试验 (或 观察 ) , 若 它 的 结果 预先 无 法 
确定 ,但 具有 如 下 三 个 性 质 , 则 称 之 为 随机 试验 ,简称 为 试验 : 

(1) 试验 的 可 重复 性 , 即 在 相同 的 条 件 下 可 重复 进行 ; 

(2) 试验 的 可 能 结果 不 止 一 个 , 且 所 有 可 能 结果 是 已 知 的 ; 

(3) 试验 结果 的 不 确定 性 , 即 每 次 试验 前 不 能 确定 哪个 结果 会 出 现 . 

随机 试验 的 可 能 结果 称 为 样本 点 或 基本 事件 , 记 为 w. 所 有 样本 点 的 集合 称 为 
样本 空间 , 记 作 O. 随机 事件 (简称 为 事件 ) 是 样本 空间 Q 的 子 集 ,包含 若干 个 样本 
点 ,用 大 写字 母 A,B,C 表示 . 样本 空间 2 称 为 必然 事件 , 空 集 Z 称 为 不 可 能 事件 . 
如 果 A 所 包含 的 样本 点 中 有 一 个 发 生 , 则 称 事件 A 发 生 . 由 Q 中 的 若干 子 集 构成 的 
集合 称 为 集 族 , 用 花 写 字母 4,2,7 等 表示 . 

一 般 并 不 把 Q 的 一 切 子 集 都 作为 事件 ,因为 这 将 给 定义 概率 带 来 困难 ; 男 一 方 
面 ,又 必须 把 问题 中 感 兴趣 的 事件 都 包括 进来 ,例如 A 是 事件 , 则 应 要 求 A 也 是 事 
和 An 


zal TARE EMT TR 
Mge 5 u 
(2 着 AE FNMAE TD 


(3) # A. €FG=1,2,… MÜ A Es 
则 称 了 为 2 的 一 a aon x 


可 测 空间 具有 如 下 性 质 ， 
DØ EF 


十 oo 
(2) # A, € 8 一 1,2), 则 有 门 AE Z; 
i=1 








) 称 为 可 测 空间 . 


(3) # A, € #G = 1,2,-=-,n) M Ü A, EFR ñ) A, € # 
(4) #ACZB6€ ZW A—BEZ 
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事件 A 的 概率 ， 
由 定义 1.2 易 知 ,事件 的 概率 具有 如 下 性 质 : 

(1)P(A) = 1—P(A),P(@) = 0. 

2 FA BEF,HBCA, Nj P(A—B)=P(A)— P(B), H P(A)> P(B). 
(39) # A, € Fli = 1,2,---,n) A; N A, = @G = ;), WI 


PCU AD)= DIPOA) 
iss i=l 
十 co 
(4) 上 连续 性 ;着 A, €AH A, DA DE Ü A, =A 
lim P(A,)= P(A) 
+o 
C5) 下 连续 性 : 若 A, E F, E. A, C A, C= “s H U A, = A, 则 
lim P(A,)= P(A) 
n-*too 
(6) £ A: E98,i 一 1,2,…,n, 有 
P(Ü AD= DIPCA)— J) PAAD (DHP A) 
£= i=1 1 ¿sa 


<i<k<n 


(7) 次 可 加 性 : ÆA € Fisl, seon, I| 


P(Ú A< 六 PCA,) 





显然 ,给 定 事件 ,条件 概率 忆 (' | 也) 具有 如 下 性 质 : 
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(DVA € Z,0< P(A|B) <l; 


(2)P(Q|B) = 1; 
(3) # A, € ZG = 1,2,-- y), R. A, NA = ZG Z ji), I| 


十 co 
P A: |B)= HPA |D 


0 


(1) 称 为 全 概率 公式 ,等 式 ( 
条 件 概率 P(A, | B) 称 为 后 后 验 概率 





1.1.2 事件 的 独立 性 





。 RFP) 是 概率 空间 ,A,B € 9, 称 A 与 B 独立 ,如 果 

x 1 PAP) 

由 定义 可 知 ， FFFA 与 B 独立 , 则 A T A 5 B,A 5j B 也 是 独立 的 . 

BX ÉQ. — s AA ER, BAA» …,A, 是 
BERIN. 如 果 对 任意 (人 4， A, x aI O(A A: ,A,} (m < m), 有 
PA, Aa SA, ) = PCA, DR "P(A, J < 














【 例 1.1] 某 个 国家 总 人 口中 有 1% 的 人 HIV Z fg bk. 现 通过 一 种 程序 来 检 
测 某 人 HIV 是 否 为 阳性 ,如 果 被 检测 的 人 HIV 是 阳性 ,通过 该 程序 检测 也 是 阳性 的 
概率 是 0. 98; 如 果 被 检测 的 人 HIV 不 是 阳性 ,通过 该 程序 检测 也 不 是 阳性 的 概率 是 
0.96. F] :通过 该 程序 检测 HIV 呈 阳 性 ,而 被 检测 者 HIV 也 是 呈 阳 性 的 概率 有 多 大 ? 
解 A 表示 “该 程序 检测 HIV 哇 阳性 ”,B 表示 “被 检测 者 HIV 呈 阳 性 ”, 则 由 
题 意 可 知 
PIB) = 01, ,PCB5 == 0.99 
P(A | B) = 0.98,P(A | B) = 0.02 
P(A | B) = 0.96,P(A | B) = 0.04 


根据 全 概率 公式 ， 可 得 
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P(A) = P(A | B DP(B) + P(A | B)P(B) 
= 0.98 X 0.01 + 0. 04 X 0. 99 = 0. 0494 
再 由 Bayes 公式 ,可 知 


P(B | A) = P(A | B)P(B) _ 0.98 X 0.01 


PCA) 0. 0494  ™ 0-1984 





12 随机 变量 及 其 分 布 


定义 1.6 RNF, P) 是 概率 空间 ,X(w) 是 定义 在 Q 上 的 单 值 实 函 数 , 若 
对 于 任意 实数 z € R, 有 {w:X(o)< r) E FMR Xw) 是 上 的 随机 变量 ,简称 
为 随机 变量 . 函数 F(x) = P (o: XG) < z) ,zx € RR, 称 为 随机 变量 X 的 分 布 函数 . 
车 随机 变量 X 的 可 能 取 值 仅 有 有 限 个 或 可 列 无 穷 多 个 , 则 称 X 是 离散 型 随机 
变量 . 其 概率 分 布 用 分 布 列 描述 : 
p = P{X = zi} sk = 1,2, 









且 满 足 ps 宇 0, 》) ps = 1, 其 分 布 函数 F(z) = 了》 lpi. 
对 随机 变量 X 的 分 布 函数 下 (z) , 若 存在 一 非 负 函数 f(x), 对 VzER, 有 
F(x) = | fu du 


则 称 X 是 连续 型 随机 变量 ，f(x) 为 随机 变量 X 的 概率 密度 函数 . 
若 f) 连续 , 则 
Eo 





= J ç) 


即 
lim 上 守信 全 二 外 = 





f(x) 


Pl(z<X<zrth) = f(z=)h + oh) 
以 上 关系 是 以 后 用 所 谓 “ 微 元 法 ” 求 概率 密度 函数 的 依据 :为 求 随机 变量 X 的 
概率 密度 函数 , 先 求 X 落 在 一 个 小 区 域 (z, z 十 由 上 的 概率 P(z < X< r+ h), R 
后 令 h — 0, 求 其 极限 





lim P (% < xs z+ h) 
即 得 f(c). 
分 布 函数 具有 如 下 性 质 


ol 
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GD)FCz) 是 单调 不 减 男 数 ; 
(220 < F(z)< 1, lim F(x)= 0, lim F(z)= l; 
(3)F(Ə(z) 是 右 连续 函数 , 即 对 Yr € R,F(z + 0)= F(x). 
下 面 是 常见 随机 变量 的 分 布 : 
1. 二 点 分 布 ( 伯 努 利 分 布 ) 
如 果 随 机 变量 X 的 分 布 列 为 
PCX = h) = pq! *,k = 0,1 
即 





P(X=1)=p,P(X=0)=g=1—p 
其 中 0 一 之 二 1, 则 称 X 服从 二 点 分 布 或 伯 努 利 分 布 ， 
2. 几何 分 布 
若 随机 变量 X 的 分 布 列 为 
P(X =k) = p (1 p)! =) 
其 中 0 二 pp 二 1, 则 称 XX 服 从 参数 为 p 的 几何 分 布 , 记 为 X — g(k; p). 
3. 泊 松 分 布 
如 果 随 机 变量 X 的 分 布 列 为 


A 
PX =k) AE (k= 0 





k! 
其 中 二 0, 则 称 X 服从 参数 为 的 泊 松 分 布 , 记 为 X — PQ). 
4. 二 项 分 布 
若 随机 变量 X 的 分 布 列 为 


P(X =k) = Ctpt (1— pt (k=0,1,.,n) 

HH O< p<1, WE X RASKA n.p 的 二 项 分 布 , 记 为 X~ Bkn p) sk X — 
Bln,p). 

5. 巴 斯 卡 分 布 

若 随机 变量 X 的 分 布 列 为 
bk— i 
PX=p = jp a-p AE EE E, 
r= i 
其 中 0 二 pp 二 1,r E Zi', 则 称 X 服 从 参数 为 p,r BERRO EA X — fkr, 
b). 


6. 负 二 项 分 布 
若 随 机 变量 X 的 分 布 列 为 
px=D= (Trao (1 = 0,1,-=-) 


其 中 0 二 pp 过 1,r€ i, 则 称 XX 服 从 参数 为 p,r 的 负 二 项 分 布 , 记 为 X — Nb(l;r,p). 
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7. 超 几 何 分 布 
若 随 机 变量 X 的 分 布 列 为 
| 
PO py = Ë ZEL, k=0,1,= minn, M) 
i 
HR M< N.n < N BHAE, WE X 服从 参数 为 M,N,z 的 超 几何 分 布 , 记 为 
X ~ h(k;M,N,n). 








8. 均匀 分 布 

若 随机 变量 X 的 概率 密度 函数 为 

1 

Ra -1 s e 
0, 其 他 

则 称 X 在 区 间 [La,6] 上 服从 均匀 分 布 . 
9. 正 态 分 布 

车 随机 变量 X 的 概率 密度 函数 为 

Rajal SE ora 


2ra 
其 中 yy 和 oc >0 是 常数 , 则 称 随 机 变量 X 服从 参数 为 wk 和 a 的 正 态 分 布 (或 高 斯 分 
布 ), 记 为 X ~ Nuo). RER u = 0,o: = 1 的 正 态 分 布 为 标准 正 态 分 布 , 记 为 
X ~ N(0,1). 
10. 对 数 正 态 分 布 
若 随机 变量 X 的 概率 密度 函数 为 


1 _ Uny)? 
e x > X0 
f (a) -| 2ra7z 


0， = = 0 
其 中 > 0, 为 常数 , 则 称 X 服 从 对 数 正 态 分布 . E X MIXTA nX ~ Nuso) 而 得 
名 . 





11. 韦 布尔 分 布 
若 随 机 变量 X 的 概率 密度 函数 为 


Fa) ai F, r>a 
° py = 





8 
0, £ < @ 
则 称 X 服从 韦 布尔 分 布 . 其 中 mm > 0) 称 为 形状 参数 ;a 称 为 位 置 参 数 ;86(8 0) 
称 为 尺度 参数 . 
12. 了 分 布 
若 随机 变量 X 的 概率 密度 函数 为 


1.2 随机 变量 及 其 分 布 ? 








E e, r20 
le; z =< Ü 
HP a > 0, 4 0, WE X RAT HH. iw X ~ ra). 


13. 埃 尔 兰 分 布 
在 工分 布 中 令 uc = n,4 > 0, 得 到 埃 尔 兰 分 布 的 密度 函数 为 


À ae, # > Ó 
fay) = an! 





0, T0 
分 布 函 数 为 
F(x) = =” A = e= > 人 ,> 0 
14. 指数 分 布 
在 工分 布 中 令 a= 1,4 二 0, 得 到 指数 分 布 的 密度 函数 为 
[ay = Ae, x—> 0 

Je = 0, z<0 

15.X 分布 


在 分布 中 令 a = 号 ,n 为 正 整数 ,4 — 元, 得 到 自由 度 为 的 x* 分 布 的 密度 函 
数 为 





Xie >0 
f(z) =r) 
0, # = 0 
16. Beta 分 布 
若 随 机 变量 X 的 概率 密度 函数 为 
F= p (=Ë, ax] 


其 中 参数 a > 0,8 > 0, 则 称 随机 变量 X 服从 参数 为 a 和 8 的 Beta 分 布 . 
17. Weibull 分 布 


若 随机 变量 X 的 概率 密度 函数 为 
f(z) = £ ($F) er e> 0 


其 中 0 盖 0,8 之 0, 则 称 随 机 变量 X 服从 参数 为 9 和 8 的 Weibull 分 布 . 
18. Cauch 分 布 


知 随 机 变量 X 的 概率 密度 函数 为 
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CO <= r 过 十 CD 





fn = py 
其 中 全 0. — so 二 /二 十 co, 则 称 随机 变量 X 服从 参数 为 和 jy 的 Cauch 分 布 . 
19. Logistic 分 布 
车 随机 变量 X 的 概率 密度 函数 为 


TexXp (Ci d š 


V3c tef i = 
其 中 c>0, 一 co 过 4 去 十 cc, 则 称 随 机 变量 X 服从 参数 为 c 和 j 的 Logistic 分 布 . 
在 二 项 分 布 中 , 当 n K.p 小 ,而 乘积 np 大 小 适中 时 ， 有 如 下 近似 : 


定理 1.2 ”对 于 二 项 分 布 BCk;n,p)， — 二 





f(x) = co < r {L+ c° 





un 如 co = Ë — x; 
由 此 可 得 , 当 2 p 较 小 时 —masunanawaepan. 
定理 1.3 而 ”很 小 时 ， 则 有 x 


从 而 当 N 很 大 ,而 ”很 小 时 ,可 用 二 项 分 布 来 近似 表示 超 几何 分 布 ， 

【 例 1.2】〗 一 般 来 说 ,只 有 0.01% 的 鲜 鱼 卵 可 以 发 育成 鲜 鱼 ,那么 40000 个 鲜 
鱼 卵 中 至 少 有 3 个 可 以 发 育成 鲜 鱼 的 概率 是 多 少 ? 

E < X # = 40000 At é ón JP Z Š R @ 65 48 3k, ñ] X JA p = 0. 01% % 
40000 
| 


二 项 分 布 ,p; = P(X = i) = (l= WE ¿= ],2,: 40006. 


又 nn 较 大 ,pp 较 小 , 故 可 用 A 二 np 二 4 的 泊 松 分 布 近似 表示 二 项 分 布 , 即 


pi == te 4 i = Ols 40000 
zi 


所 以 40000 个 鲜 鱼 卵 中 至 少 有 3 个 可 以 发 育成 鲜 鱼 的 概率 为 
p= P(X > 3) = ] — bo — pi — P: 
a~ 1 一 0.0183 — 0. 0733 — 0. 1465 = 0. 7619 
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“定义 1,7 (0,Z,P) EMEX = XG) = (Xlo), X: 0): X, w) 
是 定义 在 0 上 取 值 于 维 空间 R。 的 向 量 函数 . 如 果 X w): LKL EN, P) 
上 的 随机 变量 , 则 称 x Xlo) X n 维 随机 变量 或 维 随机 向 量 , 且 称 
F) > STZ > 1° zo) = Plo: Xi w) < x), X; (o) < za AD OA SS 27; 
4 U on 有 Carre ODER 
aea .,X,) 的 联合 分 布 函 数 ， 

特别 地 ,F(z,y) = PIX < x=,Y < y),z,y ER 是 X,Y 的 二 维 联合 分 布 函数 . 

如 果 X,Y 的 可 能 取 值 仅 有 有 限 对 或 可 列 无 穷 多 对 , 则 称 (X,Y) 是 二 维 离散 型 
随机 向 量 . 设 XY 所 有 可 能 取 值 为 (zi,y;) ,i 二 1,2,…,j 二 1,2,…, 则 (X,Y) 的 
联合 概率 分 布 可 用 下 面 的 联合 分 布 律 表示 : 

Ps: lig EY == sh | £= ly = 1,22, 











{=i j= 


如 果 存在 一 个 非 负 的 二 元 函数 fy) ,使 得 任意 x,y € 及 ,有 
FG, =|" | /Ce,yydzdy 
则 称 (X,Y) 是 二 维 连续 型 随机 向 量 sf (Z, y) 称 为 (X,Y) 的 联合 密度 函数 , 它 具有 


下 列 性 质 : 
(TD 天 到 9) Z= 


of ii f (z.,y)dzdy = 1; 
(3) 在 f(z,y) 的 连续 点 (z,y) 处 ,有 


Fay) = E 


arƏðy 
由 定义 1.7 知 ,Xi(w) 的 分 布 函数 可 由 联合 分 布 函 数 求 得 , 即 Px (zi) = F(co, 
SO, Z; oo, co) , 称 一 维 分 布 函数 Fx Cei) s Fy, (za). Fx, (z,) 为 X= (Xi, 
Xi Xa) 的 边缘 分 布 函数 .反之 ,随机 向 量 的 边缘 分 布 函数 不 能 确定 其 联合 分 布 
函数 ,但 当 它 们 是 相互 独立 时 ,边缘 分 布 和 联合 分 布 包含 着 相同 的 信息 ， 
定义 e (X, „Xos "Xn ) E n 维 随机 变量 , 若 V Ca € Rr. 有 有 
~ Blatno) = Px GO Fx (Do: Fy CG.) o 
则 称 随机 变量 X, X... X, 相互 独立 . x 
定理 1.4 若 随 机 变量 X. ,X,,…,X, 相互 独立 , 则 其 中 任意 k(2 < ; < n) 
个 随机 变量 X, ,X,,…,X， 也 相互 独立 . 
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13 随机 变量 的 函数 及 其 分 布 


先 讨 论 单 个 随机 变量 函数 的 分 布 , 设 X 是 连续 型 随机 变量 ,> 一 A(z) 是 一 实 值 





【 例 1.3】 一 个 质量 为 由 的 质点 以 随机 速度 X ERB, E X — U[0, 
Vj], 该 质点 随机 运动 能 量 Y 二 Im? , 求 了 的 分 布 . 


解 Why = Büzy — L ygt 25 a, 





2 
Z /2% dz | 1 1 
= h” Šas >, ms ; 2 
£ (y) m s P 0 s N <S mU, 
2 
而 fx (z) = 0 < =< Ve ,所 以 fy(y) — w i 7'0 < y < im’. 


KB 1.4] mE X~ N(0,1), R Y = ex" soka 度 函 数 . 


2 





J =ë 
解 G = eT, — oo < z —— co 
P y 2r 


A Y — e ,所 以 函数 y 一 et 单调 递增 .而 
z = +Iny 2d. aL 


3 3y 
故 Y 的 概率 密度 为 








¢ (FIny 1 Jez’ = 1 ~ 
fro) = 2 3 3y V2x ji 
0, 
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1.3.1 二 维 随 机 变量 函数 的 分 布 


已 知 二 维 随 机 变量 (X,Y) 的 联合 分 布 , 如 何 求 g(X,Y) 的 分 布 ?下 面 就 连续 型 
随机 变量 进行 讨论 ， 

设 连续 型 随机 变量 (X,Y) 的 联合 概率 密度 为 FCz,y), 则 随机 变量 Z = gX, 
Y) 的 分 布 函数 为 


F,(z) = J f (m | y)dz=dy (~ œ< zx <+) 
g(z,y)< < 
Z 的 概率 密度 为 


fz (z) = =de 


(一 ce < z <+ °°) 


1. 和 2 = X +Y 的 分 布 
已 知 (X,Y) 的 联合 概率 密度 为 a.y), W Z= XHY BaH A 
Fz(z) = P(Z < zx)= P(X+Y < x) 


=: II f(x,y)drdy ae [| eray]dz 


$ y= ux, cji 
O [| eu dz |du 
于 是 ,2 的 概率 密度 为 
fz(z) = | re, az 
利用 六 与 Y 的 对 称 性 可 得 
fz (z) = | fe- y.y)dy 
x X 与 立 相 互 独 立时 ,得 卷 积 公式 
O = [T aG) yG — az = |“ fxs— Wf dy 
2. AS 的 分 布 
已 知 (X,Y) 的 联合 概率 密度 为 Sy) I Z — Š Y > 0) 的 分 布 函数 为 


Fz(z) = P(X/Y < z} = | flz,y)drdy 


zj]y<cz 


=| [E rear]. [|T Fear] 


令 工 一 xy， 得 
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FG) =| [Í yf udy — | yf ou) dy Jdu 
于 是 
f = | oz)dy 一 | yy)dy = | _ y| fCyz,y)dy 
X 与 了 相互 独立 时 ， 
fe) = |” ylk dy 


3.M = max(X,Y) É N = min(X,Y) 的 分 布 
设 X 5 Y 相互 独立 , 则 
F. (z) = P IM << z} = P(X < z,Y < zh = PIX =< z = P(Y = z; 
= Fx (z)Fy(z) 
Fin(z) = P(N z} = 1— PIN > z) = 1— P{X > zY > z) 
1—PI(IX>> z) PY >22} = 1— 1— PIX < zl1— P{Y < z] 
=1—[1— Fx(z)][1 — Fy(z) ] 
推广 : 设 Xi,X,,…,X, 是 2 个 相互 独立 的 随机 变量 , 它们 的 分 布 函数 为 
Fx (z;) G 一 1,2…… 77) , 则 M = max( X, X250 Xn) K N = min{ X, . X; ,*** , X, ) BJ 
分 布 函数 分 别 为 


Frast) = Fx Fx, (2) te Fx Cz) 
Fan (2) = 1 — [1 — Fy, (z) J[1 — Fx, (2)] [1 — Fx (2)] 
特别 地 , 14 X, sX X, 相互 独立 且 具 有 相同 分 布 函数 F (x) 时 有 
F. (z) = [F(z)]”, F. (z) = 1— [1 — F(z)J* 
LB) 1.5] 设 (X,Y) 的 概率 密度 为 
Ees >Dy 
(ws ) = 
A 其 他 
试 求 Z 一 六 十 了 和 WW = Z k ËA. 
解 33 z< 0B,z— z< 0,f(z,z— z) = 0, v, 
+00 
f = |" fez- az = 0 
Ë z> O BF xz > 0 ,z— z > hfaa = e ttoo 
fz (z) = | f Gp g — x) dz = | me dz = ze” 


3 Z = X + Y 的 概率 密度 为 
Ze “Fs 0 
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fw (z) Sda Ilf = | VE yt dg — === a CESI 
3 << 0 W.f(zy.y) = 0,# fv (z) = 0. 
W= 的 概率 密度 为 


1 
s 
0, > == 9 


1.3.2 随机 向 量变 换 的 分 布 
ZELT — RANEA o a TER 


x T £i (x, . 
s 8 (a, 2) — 





满足 下 述 条 件 : 
Doet- sanf x ` 
= O. 


ORREN nas _ ao 


© acobi 行列 2 Ñ ee Be o 
"oy, w| 





MU Y, = g (X, — Y. oN X) BRAEKERS 
| Jane Za yg) IT| 
【 例 1.6] 设 X, , X; 的 联合 密度 为 ftit), Z Y, = GX, TAR = AX, 


十 dX;,,A = 





b 
| ORRY Y) 的 联合 密度 函数 qy). 
解 由 yi = ari 十 brs ,yz = cx, Hdr: 知 











Tı a TIP mtn 
4 è _b 
而 J= A A ad — bc 1 
_ Ë a A’ ad — bc 
A A 
从 而 
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1.4 撼 、 数学 期 望 和 方差 


XL Ji sss 8 5 ouR 
s> x = a) <ho Mi x 





— — ra} Jeram a) 





随机 变量 的 期 望 和 方差 的 性 质 
(DE(C) = C,D(C) = 0; 
(2)E(CX) = CE(X),D(CX) = CŒ D(X); 


DEX.) = SEX); 
i=} i=l 


(4) # X 和 Y 相互 独立 , 则 ECXY) = E(X)E(Y); 
(5)D(X) = 0 的 充 要 条 件 是 P{X = E(X)) = 1; 
(6) # X 为 非 负 整 数值 的 随机 变量 , 则 
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E(X) = SPx pi 
(7) # X 为 连续 型 随机 变量 , 则 
E(X) = u — Fla) ]dz 
定义 1. 11 ”对 于 两 个 随机 变量 X,Y, 称 x — 
Cov(X, y) = a Eo Ena = EOV) — -ECOEGY) 
为 (X， Y) 的 协 方差 : i x x o U 
由 上 式 知 , 若 X， "risas yay, MERY) = ECX)ECY) ,从 而 得 CovCX,Y) = 0. 
于 是 , 若 Cov(X,Y) 尖 0, 则 X,Y 不 独立 .因此 ,Cov(CX,Y) 关 0 刻 画 了 X,Y 的 取 值 
和 


12 X Y 是 随机 变量 ， aooo a ~ 0< DY) F 





Cor, Y) o u x 
相关 系数 具有 如 下 性 质 
Q) Æ X MY 相互 独立 , 则 rxy = 0. 
(2) | rx |= 1 当 且 仅 当 存在 常数 a 和 0, 使 得 
P{Y=aX+6}=1 
(3) 对 任意 的 随机 变量 X,Y, — 1 < rxy < 1. 





WDN XD = WDE N+ S1Gov(X,, XO. 
i=] i=] i j=1 


(5) (Schwarz 不 等 式 ) # E(X) <+, ECY?) <+ 2, J 
E (| XY |)? < EC(X’)E(Y’) 
特别 地 
| Cov( X,Y) |? < okot 
(6) Var( 2]X;) = J) Var(X) +2) J Cov(X;,X;). 
rxy 刻画 了 X,Y 之 间 线 性 关系 的 密切 程度 , 若 rxy = 0, 则 称 X,Y 不 相关 . 由 定 
义 可 知 ,和 X,Y 不 相关 当 且 仅 当 
E(XY) = E(X)E(Y) 
因此 ,着 X,Y 独 立 , 则 它们 不 相关 . 但 是 如 果 X,Y 不 相关 , 则 它们 不 一 定 独立 . 
看 下 面 的 例子 : 
【 例 1.7〗 (匹配 问题 ) 在 一 次 集会 上 ,n 个 人 把 他 们 的 帽子 放 到 房间 的 中 央 混 
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合 在 一 起 ,然后 每 个 人 随机 地 选取 一 顶 , 求 拿 到 自己 帽子 的 人 数 X 的 均值 和 方差 ， 
解 ” 利用 表达 式 久 二 Xi 十 Xi 十 … 十 X,, 其 中 
O jl 如 果 第 i 个 人 拿 到 自己 的 帽子 
"lo, 其 他 


即 求 下 (X) .DCX) ,因为 PIX, = 1) 一 于, 所 以 











2 < 
By = k pr. Ly 233 
2 n ” n” 
x 
Cov(X, , X; ) = E(X,X;) — E( X, )E( X; ) 
而 
1， 如 果 第 i 个 人 与 第 7 个 人 都 拿 到 自己 的 帽子 
XX, = 
0， 其 他 
于 是 
E(X,X,) = PIX, = 1,X; = 1) 
= PAX = PIX, =1 | x, pead 
n n—1 
故 
二 i 1 V 1 
CAA = PY l>) a a-l) 
所 以 
二 
n nf (n— 1) 


本 题 是 将 X 分 解 成 数 个 随机 变量 之 和 ,然后 利用 随机 变量 和 的 数学 期 望 等 于 
随机 变量 数学 期 望 之 和 来 求 正 (X), 这 种 处 理 方法 在 实际 中 常常 用 到 . 
[H 1.8] 随机 变量 X 的 取 值 为 一 2, 一 1,1,2, 随 机 变量 Y 的 取 值 为 一 1,0， 
1. 它们 的 联合 分 布 律 见 表 1.1. 试 证 X,Y 不 相关 ,但 也 不 独立 . 
表 1.1 X,Y 的 联合 分 布 律 
































Y 
=] 0 1 
x 
== 2 1/16 1/16 1/16 
=] 2/16 1/16 2/16 
1 2/16 1/16 2/16 
2 1/16 1/16 1/16 
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证 明 
EGY) =. D+É.0+.1=0 
EX=2 CDH. D+ l+: 2 =o 
EX =C. CDH CD. D 十 言 .1.《 DHE... D 


x= L sue . 1. . eW. . 
十 二 2) otie E= O+ 1 0+ ig 2.0 


E gé q. e sas ss Tasya l a 2 a = 
1 


所 以 E( XY) = E(X)E(Y), 从 而 X,Y 不 相关 . 
另 一 方面 ， 





P(X =2,Y =—1}) = $ # P(X=2)p(Y = 1)= Š $ = E = 


因此 X,Y 不 相关 ,但 不 独立 . 
【 例 1.9] 随机 向 量 (X,Y) 的 联合 概率 密度 函数 为 


























2 
fe (z, y) = ZEX exp| >), ce < z < y <+ c° 
REA X,Y 不 相关 ,但 不 独立 . 
证 明 
十 co 十 co 2 2 2 2 
fx (>) =| ee EY exp| 一 +y Jay 
sss z 4n 2 
" — 2 (l dyt y pe “dy 
Z= 后 ' 2 
= + 1)e 2 , — co < z <+ co 
2 V2 


本 
分 为 标准 正 态 分 布 的 方差 ， 
因为 fxr (xr,y) ph 故 


Jriy) = 





O? + 1)e >”, — co < y <+ co 
3 a: y 


很 明显 有 JrGCzyy) = fx a) fy (y) , E] y: X, Y 不 独立 . 
fx) 和 fy(y) 都 是 关于 原点 对 称 的 ,从 而 有 ECX) = EY) = o, 


+00 


十 co f+ 十 cc 2 2 2 2 
E(XY) =| | tyf xx (z, y)dzdy = | | zy = = exp{—= 了 |dzdy 
二 ee A 


= Ł (rede) (| we dz) = 0 
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故 E(XY) = E(X)E(Y) = 0. 
到 此 已 经 证 明了 XY 是 不 相关 的 ,但 它们 不 独立 . 
KJ 1. 10] X se U[0,z],Y sinX ,证 明 X: Y 不 相关 . 


证 明 E(X) = 工 ,ECY) = Lf sinzdz = 2 ECXYY = 二 | zsinzdz =s q: 
2 z Jo x m Jo 





X,Y 的 协 方差 Cov(X,Y)=1 F 。 二 一 0 


T 

从 而 X,Y 是 不 相关 的 . 

在 例 1. 10 中 Y 是 X 的 函数 ,它们 之 间 有 很 强 的 统计 相关 关系 ,但 根据 相关 系 
数 , 它 们 之 间 是 不 相关 的 . 这 进一步 说 明了 相关 系数 只 能 刻画 随机 变量 间 的 线性 相 
关 性 . 

【 例 1. 11〗 (X,Y) 是 二 元 正 态 随机 向 量 , 其 概率 密度 函数 为 

1 1 (Z 一 后 )(y 一 心 ) | (y — u) 

S E | zr l 人 | 
其 中 参数 一 ce < z, < 十 coyo > 0,o > 0, —1 < o < 1. 

RE: X,Y 独立 当 且 仅 当 po = 0. 

证 明 


(z— py 
-一 2 
Or e 010, 








fx (=) | feray dy = 








fy(y) = W. = exp| (P) | co < y <+ co 


因为 XY 独立 等 价 于 fxy(x,y) = fx(z)fy(y), A% X,Y 独立 当 且 仅 当 p = 0. 
可 以 计算 p 等 于 X,Y 的 相关 系数 ,由 此 可 知 车 (X,Y) 为 二 元 正 态 随机 向 量 , 则 
X,Y 独立 当 且 仅 当 它们 不 相关 ,并 且 X,Y 都 是 正 态 随机 变量 . 


15 A Tr 3 = 


151 离散 型 情形 


定义 1.13 (X,Y) 是 离散 型 随机 向 量 , 如 果 P{Y — y) > 0, 给 定 了 二 y £ 
件 下 入 的 条 件 概 率 的 定义 为 


人 s s> } 
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由 定理 1. 1 的 全 概率 公式 知 
PIX = z) = 2;P(X = z | Y =y} PIY = y) = Y1Py (z | yyPyLy) 
KB 1.12] 愉 服 从 参数 为 N , 户 的 二 项 分 布 , 黄 让 随机 普天 NASA 
的 Poisson 分 布 , 求 PIX = k}. 
解 由 全 概率 公式 可 知 要 
PIX = k) = DPxv (z | n) Pu (n) 


n=0 
十 co 


= Yus — Ayk AT _=3 
>) u = 99 nle 


n=k 


— ap) gi aA- p) ]™ 
> (n— k)! 


n=k 


LBI 1.13] 入 服 从 参数 为 N , 力 的 负 二 项 分 布 , 其 中 随机 变量 N 是 服从 参数 为 
B 的 几何 分 布 , 求 P{X = b. 
解 由 全 概率 公式 可 知 
P{X = k} = SIP, lz | n) Ps (n) 


n=0 


a /n 十 k 一 1 
=> [ š j a-pa 一 DB 
n=k 


= 1— 2-0 St gpn 


n=1 
= (1—p)*(1— Bp(1— pe) 


k A) 


k 
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1.5.2 连续 型 情形 


定义 1.14 — 1 TREE sss T 





u... 


x x s 
. ， PLX<zly — feta x Dau 
给 定 Y 一 y 条件 下 , X 的 条 件数 学 期 望 为 O, 
EXD =E] Y= a| zd 0 X 
显然 ,条 件 期 望 E(X|y) 是 关于 yy 的 函数 ,y 是 了 的 一 个 取 值 . 若 在 已 知 立 的 条 件 
下 ,全 面 考虑 X 的 均值 ,需要 以 了 代替 y, 则 EE(X|Y) 既 是 随机 变量 Y 的 函数 ,也 是 随 
机 变量 , 称 为 X 在 Y 下 的 条 件 期 望 . 且 ECX|Y) 在 Y = y 时 , 取 值 为 E(X | Y = y). 


条 件 期 望 在 概率 论 .数理 统计 和 随机 过 程 中 是 一 个 十 分 重要 的 概念 ,下 面 介 绍 
一 个 极其 有 用 的 性 质 . 


定理 1.9 〈 全 期 望 公式 ) 随机 变量 X 和 Y 的 期 望 存在 , 则 
x | 2] -fex | Y = apyCy) 
如 果 Y 是 离散 型 随机 变量 , 则 上 式 为 
E(X) = EX |Y = y)P{Y = y) 
如 果 Y 是 连续 雪 型 随机 变量 ,概率 密度 函数 为 fŒ) M ERA 
EX) = EX | Y = y) fy) dy 


由 全 期 望 公 式 可 知 ,E(X) 是 在 给 定 Y = y 时 ,X 的 条 件 期 望 的 一 个 加 权 平 均 
值 ,每 一 项 E(X | Y = y) 所 加 的 权 是 作为 条 件 的 事件 的 概率 . 


定理 1.10 RX, Y) 是 二 维 随机 变量 ， 条 件 分 布 函数 Fxiy (zx|y) 存 在 ， 函 

Bew 在 R 上 连续 , 若 | je Paty (1y) < 下 , 则 随 机 实 量 a(X) EY 
= y” 条件 下 的 条 件数 学 期 望 为 ; — i — 
E[ODIY = y] x Soe — 
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条 件 期 望 E(X | Y = y) 是 关于 条 件 概率 的 期 望 ,而 条 件 概率 具有 概率 的 性 质 
因此 ,条 件 期 望 也 有 很 多 类 似 期 望 的 性 质 。 

RX, Y, Z 是 (Q,F,P) 上 的 随机 变量 ,gC(.),g1(*),gz(*) 和 h(。，) 为 R 上 的 函 
数 ,v(，) 是 二 元 函数 ,ci ,cs 是 常数 , 且 各 数学 期 望 均 存在 , 则 有 

(1)E([e g (X)-+ c ge(X)]| Y= y) = ca ELe (X) | Y= y]+ c; E[g; (X) | 
Y = yj 

(JE n | Y= y] = c. 

(3)E[o(X,Y) | Y = y] = E[%(X,y) | Y = y]. 

(4) WR X Ej Y 相互 独立 , 则 ELg(X) | Y = y] = ELg(X)]. 

(5S)E[g(X)h(Y)|X = z] = g€%%*2)E[A CY) | X = z]. 

(6)E[g(X)ACY)] = Et(g(X ELY) | X). 

由 性 质 (1),(5),(6) 可 知 ,E[g(X)|X= r] = g(z2);E[g(X)] = E{E[Lg(X) 
| Y]). 


[J 1.14] 设 随 机 变量 X 的 教学 期 望 据 (X) 存在 ,XX 二 Dlp A P pok=1, 
2,…，,N 都 是 随机 变量 ， 并 且 相 互 独立 ;N 仅 取 自 然 数 ， ECN) 存在 ,证 明 ， 
E(X)= SIPIN SERJE Ch) 
证 明 


十 co 

ECR) = ELES | N= = SPIN =n) E( On |N = n) 
= DPN = n) DE 
= SEW FPN Sm 


Hoo 


= 2>7EG PIN >n} 
k=1 
X 3 p 具有 相同 分 布 ，, 则 
ECX) = E) PIN >k)= EG) SPIN = k)= EEN) 


先 对 一 个 适当 的 随机 变量 取 条 件 ， 不 仅 可 以 求 得 期 望 ， 也 可 以 用 这 种 方法 计算 
事件 的 概率 . 设 M 是 一 个 任意 事件 ,定义 示 性 随机 变量 为 

Iu(w) = 个 Tue m 

0, Fw ¢ M 


显然 有 


22 第 1 章 概率 论 基 础 知识 








PIM} = Ellu] = E(E[TIv Co) | Y = yJ) 
= [EIn w) LY = yaf) 


= |P{Iuo) | y = yan 


Y 为 任意 的 随机 变量 . 
KX@J 1.15] X~ F(z),Y ~ G(y) 是 相互 独立 的 随机 变量 ,XX 十 了 的 分 布 记 为 
xG, 称 为 下 与 G 的 卷 积 , 则 
FxG(z) = PIX +Y < <) 


-+00 
=f C P(X+Y < = | Y = y}dG(y) 


= |_ Pix < z— y)dGGy) 


Fx 下 记 为 ,Fx 下, WH F, ,以 此 类 推 ,可 得 到 下 , = F < F, RA F nE 
卷 积 ,是 个 独立 且 具 有 共同 分 布 F 的 随机 变量 的 和 的 分 布 . 

【 例 1.16] (X, Y) 是 二 维 正 态 分 布 , 即 (X,Y) ~ Nm, m» p GL sos), A) 
合 概率 密度 函数 为 
1 








JfiCp gus = 一 
27n010» A— ø)? 
exp 1 - Re | 
ZC — g? oi 0102 o2 
则 
— fy) 
frix (y | z) Fala) 


1 
2o — ø) 





xp [x -p plaa] | 
1 


1 
— =ë 
V2raz (1 — ø)? 
为 正 态 分 布 的 密度 函数 , 故 


EY | X = z) = pe hy 
1 


E(Y | X) =p Fp ZR = D) 
1 


【 例 1.17】 (匹配 问题 续 ) 设 有 nn 个 人 ,把 他 们 的 帽子 混在 一 起 后 ,每 人 随机 地 
选 一 顶 , 求 恰好 有 悄 个 人 选 到 自己 帽子 的 概率 . 

解 ” 记 表示 全 部 匹配 这 一 事件 及 P, = P(E), RART n MABA 
选 到 自己 帽子 这 一 事件 ,M 为 第 一 个 人 没有 选 到 自己 帽子 这 一 事件 . 利用 全 概率 公 
式 得 

P, = P{E} = PIE | M) P(M) + PIE | M) P IM) 

由 于 P{E | M)PIM) = 0, 从 而 
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n — 1 


P, = P{E | M)P(M) = P{E | M) 





n 
P(E|M) 是 n 一 1 个 人 从 nn 一 1 顶 帽子 中 各 取 一 顶 都 不 匹配 的 概率 ,其 中 有 一 
个 人 的 帽子 不 在 这 nn 一 1 顶 帼 子 中 .此 事件 由 两 个 互 不 相 容 的 事件 组 成 ,一 个 事件 
是 都 不 匹配 且 多 余 的 那个 人 ( 即 其 帽子 已 被 第 一 个 人 取 走 的 那个 人 ) 未 能 选中 多 余 
的 帽子 ( 即 第 一 个 选取 人 的 帽子 ); 另 一 个 事件 是 都 不 匹配 但 多 余 的 人 刚好 选 到 了 
多 余 的 帽子 . 前 一 个 事件 的 概率 是 P, 1, 因 为 可 以 将 多 余 的 帽子 看 作为 多 余 的 人 


的 ,第 二 个 事件 的 概率 是 -二 JP ,所 以 有 


P(E| M) = P, +— P. 
进而 有 
P, = P(E | M) El = EP, a +P. 
或 等 价 地 
Ë, — P, 二 一 (Pi — P...) 


显然 有 Pi = 0,P, 一 +: T AAE k XT 8 





P, — P, = Lep, P,) = 


所 以 P, = 


a. ae Li spe 
AREA TEP. =F pi 


对 于 固定 的 个 人 ,只 有 他 们 选中 自己 帽子 的 概率 为 
1 1 1 (n— k)! 


a ai eaae nl Ps 


其 中 Pu 是 其 余 n 一 个 人 从 他 们 自己 的 那些 帽子 中 选取 但 全 都 不 匹配 的 概 
Ak NAAA C 种 ,所 以 恰好 有 上 个 匹配 的 概率 是 


(Qn — k)! 1-1 _ l (一 1 一 
n! ly 3! ' 十 车 二 而 站 


当 nn 充分 大 时 ,上 式 近 似 为 e 1/k1l. 
[@J1.18] ZU —U[0,1],& U= pú £F F ,X— B(n,bp) ik k X56624. 
解 P(X = k) = [P(X = k | U = p)dFv(p) 








(n > 2 时 ). 





Per e = 





1 n! 


= = sss k WE n—k 
而 而 一 商人 一 和 Qp 
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n n! k!(n— k)! 
k!(n— k)! (a+1)! 


= 1 
(a+ 1) 


即 久 是 0,1,…,n 上 的 均匀 分 布 . 
【 例 1.19] 随机 向 量 (X,Y) 的 联合 概率 密度 为 





(k = 0,1,，…，,77) 





Lease areke s eto 
f( m,y) = + y 
0, 其 他 
试 求 E(X | Y). 
解 
iš ii Lefroid y> 0 é, y 0 
fy (y) = | f(x,y)dr = 430 Za i 
I 0, 其 他 ç 
3 y> 0 时， 
T = 这 
>. >= 0 
LB = 
id ， Åe 
当 y> 0 时 ， 


Foo += ， 
E(X | Y = y= | x» fx (z | y)dz = | ze — sas == 3 


所 以 E(X | Y) = Y 
【 例 1.20] 设 在 底层 乘坐 电梯 的 人 服从 均值 为 10 的 Poisson 分 布 ,此 楼 共有 
NT 十 1 层 , 每 一 个 乘客 在 每 一 层 楼 要 求 停 下 来 离开 是 等 可 能 的 ,而 且 与 其 余 乘客 是 
否 在 这 一 层 停 下 来 离开 是 相互 独立 的 . 求 所 有 乘客 都 走出 电梯 之 前 ,该 电梯 所 停 的 
平均 次 数 . 
l, 电梯 在 第 i 十 1 层 停 
0， 其 他 


m X = YX, 表示 电梯 停 的 总 次 数 . 
设 在 底层 乘坐 电梯 的 人 数 为 Y — P(10), 则 有 


N N 
E(X) = JEX) = X PX: = 1) 
i=] i=l 
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所 以 E(X) = N(1—e™) 
1.6 特征 变数 


定义 1.15 随机 变量 X 的 分 布 函数 为 下 Cz) ,如 果 积 分 
KD 会 ECes) = Fe dEC2) 

存在 , 则 称 其 为 X HERRA. 

显然 若 X Wk 阶 矩 存在 , 则 EC Xt) = gp” (0). 矩 母 函 数 由 此 得 名 . 

当 抢 母 函 数 存 在 时 , 它 唯一 地 决定 分 布 , 因 此 可 以 用 抢 母 函数 来 刻画 随机 变量 
的 概率 分 布 . 

【 例 1.21】 X~ Nso) Y ~ Nm.) 且 相 互 独立 , 则 它们 的 和 2 一 和 X 十 
Y 65 46 35 Ə š 28 

yz(t) = E[e“xtw J = E(e*)E(e”) 
= px (1) yy t) 
= exp{ (yu 二 pz)t 二 (of 二 To?)t /2} 

H T X + Y 的 矩 母 函 数 刚好 是 均值 为 十 jw, 方差 为 十 gi 的 正 态 随机 变量 
的 矩 母 函 数 , 根 据 唯一 性 知 ,XX 十 Y 的 分 布 就 是 正 态 分 布 . 

但 随机 变量 的 矩 母 函 数 不 一 定 存在 ,因此 在 理论 上 ,一般 用 如 下 定义 的 特征 
函数 ; 

S 1 16 设 随机 变量 X 的 分 布 函数 为 F(z), 称 
p0) = Ele) = | erdF(z),— so < <+ = 

为 X 的 特征 函数 . 

特征 函数 pO) 是 实 变量 :的 复 值 函数 ,因为 | e= | = 1, 所 以 随机 变量 的 特征 函 
数 一 定 存在 . 显然 特征 函数 只 与 分 布 函数 有 关 , 因此 也 称 其 为 分 布 函数 的 特征 
函数 . 

若 XX 为 离散 型 随机 变量 ,其 分 布 列 为 pa = P(X = ark 一 1,2,…, 则 其 特征 
函数 为 
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p(t) = Some 一 co < t <+ eo 
E X 为 连续 型 随机 变量 ,其 概率 密度 为 fCz), 则 其 特征 函数 为 
g(t) = | ee7coadr， — cə = t< ee 


特征 函数 具有 如 下 基本 性 质 
(1) ERE: | o) |< | g0) |= 1, — so < z <+ e°. 
(2) — EUERE: oC) 在 整个 实数 轴 ( 一 co, 十 ce) 上 一 致 连续 , 即 对 Ye > 0, 
36 之 0, 使 得 当 | 关 二 8 时 ,对 + 一致 有 
|eG + h)— gt) |< e 
(3) 非 负 定性 :对 于 任意 n > 1, 任 意 实数 ,ts，…,t, 和 任意 复数 zz ,zs，*…， 
zs 有 
>e, — t) zzi Z 


(4) HEXER E: pC i) = p02). 
G) & Y = aX 十 0, 其 中 2 为 任意 实数 ,px (7) ,gy(z) 分 别 是 X,Y 的 特征 函 
数 , 有 
pr (2) = a" + px (at) 
(6) 设 X 和 Y 为 独立 随机 变量 , 则 
gx (t) = @x (t) pr (1) 
一 般 , 如 果 X I. X... , X, 相互 独立 , 则 
PATH (2) = px, (t) px, (t) px, (1) 
(7) WR XE n WEA, M E RIERA g(t) 有 nn 阶 导 数 , 且 
E(X:) = (— te 0 (0),k = 1,2,°,n 
(8) 唯一 性 定理 : 若 X 的 特征 函数 为 p(D, 则 和 的 分 布 函数 下 (z) 由 goa) 唯一 
确定 . 
对 于 维 随机 变量 也 可 以 定义 特征 函数 如 下 : 
yL j X (X. X... s 
w — x 









m. G sr t J x 





5 = . ata 


为 和 的 特征 函数 ， 和 
特征 函数 是 研究 概率 论 最 重要 的 分 析 工 具 之 一 ,用 特征 函数 作为 随机 变量 的 
研究 工具 比 用 分 布 函数 要 方便 很 多 . 例如 ,独立 随机 变量 之 和 的 概率 分 布 是 各 被 加 
项 分 布 的 卷 积 ,而 独立 随机 变量 之 和 的 特征 函数 则 是 各 被 加 项 特征 函数 的 普通 乘 
FR. 又 如 ,通过 随机 变量 的 分 布 函数 求 其 数字 特征 ,一 般 需 要 进行 积分 运算 ,而 通过 


— a i o 
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特征 函数 求 其 数字 特征 ,一 般 只 需要 进行 微 商 运算 . 
〖 例 1.22] 设 随机 变量 X HUA Ú b E 22 n 的 X” 分布. 
(1) 利用 特征 函数 求 E(X) 和 D(X). 
(2) 2 X— X (n ),Y ~X (m), B. X,Y 相互 独立 ,利用 特征 函数 证 明 
XHY ~X (m +m), PX 分 布 具有 可 加 性 . 
解 (1) 因为 X 一 入 (2), 故 入 的 特征 函数 为 px(1) = (1 一 2it)”?， 
px(0) = ni, 
Gx(0) =— nln + 2), 
ECX) = (一 Dex(0) = n, 
ECX?) = (一 D2gx(0) = n(n + 2), 
D(X) = E(X’) 一 [ECX)]? = 2n. 
(2) 令 Z 一 X 十 Y, 则 
gz(t) = ELP] = Ele e”) = gx (t)gy (t) 
(1 一 2i) e (1 — 2it) LÜ 


lI 


(1 — 2iy 122 
FR Z = X+Y — X (m +m) 


l 


[01.23] 设 X~ N(0,1),6 与 X 相互 独立 ,P{E 一 0) = P(£—1) 一 也 ,全 


X, #=0 
Y = 
— X, < 一 1 
E: Y ~ N(0,1), 但 (X,Y) 不 服从 二 维 正 态 分 布 . 


证 明 ”因为 
or (ti) = Ele) = ELE(e” | ë) ] 

= P(é= 0} * EC” | ë= 0) + P(£ = 1) * Ele” | £ = 1) 

1 


í` ux 1 这 (一 X) 
s Pte y zle J] 


2 
= 


lI 


所 以 了 一 N(0,1). 
而 
gxr (u,v) = E(eiXtvY) 一 E[ E( ex+iy 18] 
P{E = 0) + Ele | g= 0) + P{Ẹ = 1) + E(eetw | £ = 1) 


FEC) + L pcem) 


l 


1 i! 


< 一 二 (Cao 一 二 (uv)? 
= 一 G 2 十 — e 2 
2 2 
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Fe (e +e") 

故 pxy (u,v) 不 是 二 维 正 态 分 布 的 特征 函数 ,因此 (和 ,Y) 不 服从 二 维 正 态 分 布 . 
常用 分 布 的 特征 函数 见 表 1. 2. 

表 1.2 常用 分 布 的 特征 函数 表 
























































分 布 名 称 分 布 律 或 概率 密度 特征 函数 
单 点 分 布 b. = 1 ie 
两 点 分 布 P. P» Po q-q I= p pe tg 
二 项 分 布 B(n,p) pr = ptg k = 1,2,-- n q = 1—p (pë + q)" 
泊 松 分 布 rA) b, = = 了 2 == QD 
几何 分 布 b = pr (0 < p< lg = 1— p), k= 1,2,--- pë (1 — qe") ! 
1 
均匀 分 布 po -| esse n 
Jey 
0, 其 他 
Ae = - > 0 i =l 
指数 分 布 fe = | “ Q> 位 二 此) 
0 + =< Ü A 
)2 > 
正 态 分 布 Noo) ra= (ze 0) we 
2n0 Po. 
1 ä a 
z 1? e = >> Ü 
X (n) 分 布 f=) (1 — 2i)? 
0 == 0 
Bb yigt 之 0 : 
T'(a,B) 分 布 Fiz) ro š k: (= 
0 sL O i 
















17 概率 不 等 式 


x- BOD >< < 20 


l x- -EOD <e> 1-2% 


定理 1.11 (Chebyshev “usss a E(X), ŽA 
4 对 任意 给 定 的 e> 0, 有 x x 
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Chebyshev 不 等 式 只 利用 均值 及 方差 就 描述 了 随机 变量 的 变化 情况 ,不管 X 
的 分 布 是 什么 ,X 落 在 (E(X) 一 e,E(X) +e) 中 的 概率 都 不 小 于 1 一 之 人 2 因此 它 
在 理论 研究 及 实际 应 用 中 很 有 价值 . 

【 例 1.24] 森林 中 树木 的 高 度 X 是 随机 变量 ,其 均值 六 一 20 m, 标 准 差 = 
2 my, 问 某 棵 树 的 高 度 与 平均 高 度 20 m 至 少 相差 4 m 的 概率 有 多 大 ? 

解 利用 Chebyshev 不 等 式 知 

P{| X—20 |> 4) < 4/16 = 0.25 
若 和 是 正 态 随机 变量 , 则 
P{| X— 20 |> 4} = PIX —g00 >4) +P{X— 20 <— 4} 
= 2@(— 2) = 0. 046 
其 中 B(x) 是 标准 正 态 分 布 的 分 布 函数 . 
此 例 也 说 明了 Chebyshev 不 等 式 只 给 出 了 随机 变量 落 在 某 个 区 间 的 一 个 粗略 
的 估计 . 
定理 1,12 (Markov 不 等 式 ) # y = h(>) 是 [0, 十 co) 上 非 负 的 严格 递增 
的 函数 , 则 对 任意 s 二 > 0, 有 
be x 1 eT EO 


hle) 
特别 地 ,h(x) = z“ ,a > 0 BF, Markov 不 等 式 为 


PI x |> e) < 


令 a 二 2,X HX — pu 替换 则 得 到 Chebyshev 不 等 式 . 


定理 1.13 (Schwarz 不 等 式 ) 对 任意 随机 变量 X,Y, 总 是 有 
"CEC XY |) < E(X2yEcCY:) 
等 号 成 立 当 且 仅 当 P(Y = kX)}== 1,k 是 某 一 常数 . 
定理 1.14 (Holder 不 等 式 )X,Y 是 随机 变量 , 正 实数 ,满足 二 十 上 = 1 
则 
E XY D DEO X [97 EGY rye 
令 r= 二 ;一 2, 可 得 到 Schwarz 不 等 式 . 


定理 1.15 (Jensen FFR) 车 有 (zx) 是 一 西 函数 ; 则 对 任意 随机 变量 义 , 有 
h[E(X)] = E[b(X)] 
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这 四 种 收敛 性 有 下 列 关系 : 





a.e P d 
X, —> X. =>X, —> X>X, — X 


r P d 
X, —> X>X, — X>X, — X 





E 


aN wile 


| a 
i C ION Waa 





oA 


[5 1.25) 随机 变量 X 表 示 随 机 事件 A 的 示 性 函数 , 即 X JR AA Bernouli 分 
布 , 其 中 
1, 车 随机 事件 A 发生 
0, 若 随 机 事件 A 不 发 生 
p = P{A} =P(X=1), 1— p= P{X = 0) = P{A) 
A TEH p= P{A), 重 复 独立 地 做 nn 次 试验 ,每 次 试验 只 有 两 个 结果 和 A 和 A, 相 应 


1.8 极限 理论 3d 





结果 的 示 性 变量 记 为 XXX, N] X; 相互 独立 且 与 X 同 分 布 ， 所 以 有 


ake |+ X, P 
Ú n 


AX, 表示 nn 次 随机 试验 中 随机 事件 A 出 现 的 频率 ,p 是 随机 事件 A 发 生 的 
me, 由 上 面 的 结论 可 知 频率 是 概率 的 一 个 相合 估计 ， 
17 ea 强大 数 定律 ) i 是 相互 独立 的 随机 变 





> F (X) = p 






P oran 





oa 





o 5 
aoo 要 条 件 是 Linderbers 条 件 





Ç = Vaz) 


: _ y7 
x ORE. U x — : 
【 例 1.26] (E Sr h š i£ RAA) 记 Y， 二 “十 X， prap 
努 利 试 验 中 事件 A 出 现 的 次 数 ,Y, ~ Bn, p), ECY,) = np.Var(Y,) = np(1—)p), 
根据 Linderberg-Levy 中 心 极限 定理 可 知 ,Y, 有 近似 正 态 分 布 N(np,np(1 一 pp)), 因 此 


s qFx: w = a 
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. 1 
i: -5 nb aa 


?1 一 去 一 地 


vnp tl—p) Vnp(l—p) 





in We 
V7 力 (1 一 力 ) í Vnp(1— p) 


上 式 中 士 豆 称 为 连续 型 修正 ,因为 是 用 连续 型 分 布 通过 一 个 离散 型 分 布 ,为 了 














提高 逼近 的 精度 ,加 了 这 个 连续 型 修正 . 3 n R K.p 接近 1/2 时 ,一 般 np > 35, 
?办 (1 一 力 ) 盖 10, 此 时 可 以 得 到 比较 满意 的 正 态 逼 近 效果 ， 
[1.27] 已 知 在 电子 产品 的 质量 检测 中 ,有 5% 的 产品 是 有 故障 的 , 问 1000 
个 电子 产品 中 有 故障 的 产品 占 的 比率 在 4% — 6% 之 间 的 概率 有 多 大 ? 
E 令 和 表示 1000 个 产品 中 有 故障 的 产品 个 数 , 则 和 一 B(1000,0.05). 因此 
P 140 < X < 60} = a 


i=40 1 
为 了 简化 计算 ,用 二 项 分 布 的 正 态 逼 近 求 解 . 
X np(1— p) = 1000 X 0. 05 X 0. 95 = 47.5 > 10, 可 以 得 到 比较 满意 的 结果 


puocxa oomo ORE) o(a) 


= (1. 523) — (— 1. 523) = 0. 972 


o. 05): (0. 95) 100i 
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2] 随机 过 程 的 概念 


在 概率 论 中 ,随机 变量 XX 是 在 固定 条 件 下 一 个 随机 试验 的 结果 ,这 些 条 件 的 变 
化 会 影响 试验 的 结果 , 即 X 的 概率 分 布 会 改变 . 考虑 到 这 些 条 件 的 变化 ,可 以 将 随 
机 变量 X 看 作 是 依赖 于 一 个 确定 性 参数 上 的 变量 , 即 和 = XG. 这 种 定义 的 方法 适 
用 于 广义 的 随机 试验 .为 了 更 好 地 描述 这 些 广义 的 随机 试验 , 先 看 下 面 的 例子 : 

【 例 2.1】 在 一 个 特定 的 地 理 位 置 ,每 天 12:00 测量 大 气温 度 . z, 表示 在 某 年 
的 第 i 天 测量 的 温度 ,zi 的 值 每 天 都 在 变化 ,因此 ，, 它 可 以 看 作 是 随机 变量 Xi 的 一 
次 实现 . 因此 ,在 某 年 的 第 i 天 12:00 测量 的 (随机 ) 温度 Xi, 除 了 温度 的 随机 变化 ， 
X, 也 取决 于 一 个 确定 性 的 变量 ,即时 间 . 如 果 仅 对 该 年 前 三 天 (或 任何 其 他 连续 的 
三 天 ) 的 温度 义 ! , 义 ; ,Xs 感 兴趣 ,那么 这 些 温度 至 少 是 近似 同 分 布 的 . 然而 ,如 果 要 
刻画 出 每 天 的 温度 之 间 明 显存 在 的 相依 关系 , 则 需要 对 随机 向 量 (Xi,Xs,X:) 的 
联合 概率 分 布 有 所 了 解 . 

从 这 个 例子 以 及 与 之 相 联系 的 问题 可 以 看 出 ,有 必要 介绍 下 这 个 广义 随机 试 
验 : 在 某 年 对 一 个 给 定 的 地 理 位 置 每 天 12:00 的 温度 进行 测量 . 这 个 广义 随机 试验 
的 随机 结果 是 随机 向 量 (X,X: ,… ,Xsss) ,其 中 X, 既 不 独立 也 不 同 分 布 . 如 果 第 i 
天 的 温度 z, 测量 出 来 了 ,那么 向 量 (zi ,zs，… ,xs6s) B| U S EPR 3 z = rlt), t € 
{1,2,…,365) 的 值 域 : 当 z7 = i fr) = r 向 量 (xi,xsz，… ass) 是 随机 向 量 
Xi Xost Xass) 的 一 次 实现 . 

如 果 一 个 传感器 用 图 表 记 录 了 这 一 年 的 温度 ,那么 测量 的 结果 就 是 时 间 z 的 连 
续 性 函数 :zx = +G) ,0 过 1 过 1, 其 中 x() 是 随机 温度 XX(2) 在 一 个 固定 地 理 位 置 上 
在 时 刻 t 处 的 一 次 实现 . 因此 ,介绍 这 个 广义 随机 试验 一 一 在 一 个 给 定 的 地 理 位 置 
上 一 年 内 温度 的 连续 测量 是 有 意义 的 , 它 可 以 定义 为 {(X(2D) .0 < ; < 1). 

这 个 广义 随机 试验 的 完整 概率 特性 需要 已 知 所 有 随机 向 量 (X(n),X(ts),…， 
XAD 0L <, < <t, S< 1;n= 1,2,:: 的 联合 概率 分 布 .很 明显 ,对 于 很 小 
的 时 间 差 异 2 t XG) A X Ga) 之 间 有 一 个 很 强 的 统计 相依 性 . 然而 ,由 于 一 
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个 地 区 天 气 形势 的 惯性 ,对 于 很 长 的 时 间 差 异 4 一 ,X(t;) 和 X(t) 也 可 能 是 统计 
相关 的 . 

【 例 2.2] 影响 随机 试验 结果 确定 性 的 变量 不 一 定 都 是 时 间 . 比如 ,在 一 个 固 
定 的 时 间 点 和 固定 的 观察 点 ,温度 是 根据 距离 地 球 表 面 的 竖 直 长 度 了 测量 的 ,那么 
Bkr = zr(h),0 < h < L ,BJ] 5 4 $ñ + #| ES 5 M pR + d 6) 3E Ë h. 但 是 ,如 果 试 
验 在 接 下 来 的 几 年 里 在 同样 的 条 件 ( 相 同 的 时 间 、 地 点 和 测量 程序 ) 下 重复 进行 , 那 
么 考虑 到 不 可 预测 因素 的 影响 ,可 以 得 到 不 同 的 函数 工 二 Xx(h). 因此 ,在 距离 hh 下 
的 温度 是 一 个 随机 变量 X(h). 这 个 广义 随机 试验 一 一 根据 距离 地 球 表 面 的 竖 直 
长 度 工 测量 的 温度 ,定义 为 :{ 久 (hh),0 过 hh 过 LL}). 它 的 一 次 实现 是 用 的 实 函 数 : 工 二 
zr(h),0 < h < L. 

在 这 个 例子 中 ,认为 温度 是 距离 h 和 观测 的 时 间 点 + 的 函数 也 是 有 意义 的 , 即 : 

= (有, 四 ,0 < h < L.,t >= 0. EERIE + 取决 于 一 个 确定 性 的 随机 向 量 :6 — 
(,). 不 过 ,本 书 只 考虑 一 维 参 数 空间 的 情况 . 

随机 试验 的 结果 是 具体 数值 ,而 广义 随机 试验 的 结果 是 具体 函数 ,如 例 2.1、 例 
2.2, 因 此 ,从 字面 上 说 ,这 种 广义 随机 试验 又 经 常 被 称 作 随机 函数 . 但是, 术语“ 随 
机 过 程 ” 更 常用 ,本 书 沿用 这 个 名 称 . 下 面 给 出 随机 过 程 严格 的 数学 定义 : 


定义 2. 1 ”给 定 概率 空间 (Q,7,P) 及 参数 集 ,对 每 一 个 参数 1 € TX, 
o) 是 一 定义 在 概率 空间 (0,7,P) 上 的 随机 变量 , 则 称 随机 变量 族 X, = (XG, 
w),t € T) 为 该 概率 空间 上 的 随机 过 程 ， TAXU), £ € T) R XO). 


参数 集 了 一 般 表 示 时 间或 空间 ,常用 的 参数 集 有 了 工 = N, = 40,1,2,…} MT 
= [a,8j, 其 中 a 可 以 取 0 或 一 ,6 可 以 取 十 0. 当 参 数 集 工 取 可 列 集 时 ,一般 称 
(Xa), tE TT} 为 随机 序列 或 时 间 序 列 , 此 时 记 为 {X, n> 1); 4 £ 8 E T E: — 

间 时 , 称 {X(1) ,t € T) 为 连续 时 间 随 机 过 程 . 

(XG), € T) 的 取 值 范围 称 为 随机 过 程 的 状态 空间 , 记 作 T.I 中 的 元 素 称 为 
RA. E 工 为 实数 (复数 ) 集 , 则 称 {X(CD ,zeE T) 为 实 ( 复 ) 随机 过 程 ; 若 了 为 ” 维 欧 
式 空 间 , 则 称 {X(2),t E T) H n 维 随机 过 程 . 

由 定义 知 ,随机 过 程 {(X(z) ,+ € T) 是 一 定义 在 TXQ 上 的 二 元 函数 , 当 固定 如 
ET 时 ,X(to,，，) 是 定义 在 样本 空间 0Q 上 的 一 个 随机 变量 ; 当 固 定 wE€ Q 时 ,X(.， 
w) 是 一 个 关于 参数 + ET 5 R nsn mi: 
程 的 一 次 实现 ; E to E Tro € ORX 0) ET, 即 取 到 状态 空间 的 一 
素 . 

【 例 2.3】 连续 不 断 地 投掷 一 枚 硬币 ,以 “1” 表 示 正 面 ;*2” 表 示 反 面 ,X,(w) 
ATP n KARGER WJ IX. ,n > 1) 是 一 随机 过 程 . 

【 例 2.4] 考虑 某 “ 服 务 站 ”在 [0,zj 内 来 的 “顾客 ” 数 , 记 为 NGC， 固定 z, 
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NO 就 是 一 随机 变量 . 因此 ,{N(C ,Li 三 0} 是 一 随机 过 程 . 这 里 的 “顾客 ”可 以 是 
电话 的 “呼唤 ”, 通信 设备 中 的 “信号 ”, 一 个 系统 的 “更 换 设 备 ”, 放 射 性 物质 衰变 的 
“粒子 ”等 ， 

〖 例 2.5) 在 工程 学 科学 和 经 济 学 中 ,有 许多 依赖 时 间 的 随机 现象 ,它们 可 
以 用 随机 过 程 来 描述 . 在 一 个 电 回路 中 ,保持 电压 严格 稳定 是 不 可 能 的 . 假设 热 品 
声 导 致 了 电压 的 随机 波动 ,如 果 v(t) 表示 在 时 刻 t 电 压 的 测量 值 ,那么 v = v(t) 就 
是 随机 过 程 {V(1),t 宇 0) 的 一 条 样本 路 径 , 其 中 V(t) 是 在 时 刻 上 处 电压 的 随机 值 . 

设 {X(CD, € T) 是 一 随机 过 程 , 依 其 定义 可 知 ,对 任意 固定 的 +€ TXO 是 
一 随机 变量 ,其 分 布 函 数 记 为 

FG;z) = P(X) < z=),z € R (2. 1) 
称 式 (2. 1) 为 随机 过 程 {XCD ,zeE T) 的 一 维 分 布 函数 . 

一 般 地 ,对 Vn EN 1, € T,X) XG) XG) 是 nn 个 随机 变 

量 , 它 们 的 维 联合 分 布 函数 为 
F(t st yd TY sy ye ç Es À) 
= P(X) = zm | N Gb) By X (t. ) S 2 y (ay ry) € R" 


称 式 (2. 2) 为 随机 过 程 {X(t),t € T) ËJ n EB G rfi RA. 







显然 ,随机 过 程 的 有 限 维 分 布 函数 族 具 有 如 下 人 性质: 
(1) 对 称 性 ;对 (1,2,…,n) BERAE Gii sizs sin) ,有 

Pl ta totai za sz.) 一下 
(2) HWRE: F m< n A 

F(t; A ET A PELES TE 3 9 十 OO, tte, 十 oo) 
= F(t otz s**t stm 321 Ts 9 sZ, 2 

从 理论 上 分 析 , 对 于 给 定 的 一 个 随机 过 程 , 可 以 先 确定 它 的 有 限 维 分 布 函数 
族 , 并 由 此 来 研究 随机 过 程 的 动态 统计 规律 性 . 但 在 一 些 实际 问题 中 , 并 不 是 先 定 
义 出 随机 过 程 ,而 是 先 根 据 随机 试验 的 结果 ,运用 近似 的 方法 提出 有 限 维 分 布 函数 
族 , 然 后 根据 这 个 有 限 维 分 布 函 数 族 来 建立 一 个 随机 过 程 的 模型 . 那么 随机 过 程 和 
有 限 维 分 布 孙 数 族 是 否 存 在 一 一 对 应 的 关系 呢 ?Kolmogorov 在 1931 年 提出 并 解决 
了 这 个 问题 ,下 面 不 加 证 明 地 给 出 如 下 定理 : 
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定理 2.1 (Kolmogorov 存 在 性 定理 ) 设 分 布 函数 族 {F(G i 
sh h o t € Ton => 1} 满足 上 述 的 对 称 性 和 相 窜 性 ， 则 必 存 在 概率 空间 
OFP) 及 定义 其 上 的 随机 过 程 {X(2),t E 了 工 ， 使 (下 (5 Ts" 
Zr) sti stzs t, € Tan > 11 恰好 是 {X(2D,t € T) 的 有 限 维 分 布 函数 族 . 


2.2 随机 过 程 的 数字 特征 


Kolmogorov 存在 性 定理 说 明 可 以 将 对 随机 过 程 的 研究 转化 为 对 有 限 维 分 布 
函数 族 的 研究 .但 是 在 实际 问题 中 ,要 准确 知道 随机 过 程 的 全 部 有 限 维 分 布 函数 族 
是 一 件 非 常 困难 的 事 , 有 时 甚至 是 不 可 能 的 . 因此 ,人 们 往往 用 随机 过 程 的 某 些 数 
字 特 征 来 刻画 随机 过 程 的 局 部 性 质 ,而 且 对 于 某 些 随机 过 程 只 需要 求 出 其 几 个 数 
字 特 征 , 就 可 以 确定 其 有 限 维 分 布 函数 族 . 


2.2.1 均值 函数 


HIX), t E T) 是 随机 过 程 , 如 果 对 任意 t+ E T,E[LX(z)] 存在 , 则 称 函 数 
mto = E[ X(2) J 
为 随机 过 程 {(X(z) ,t E T) 的 均值 函数 ,mx(z) 表示 随机 过 程 在 上 时 刻 状 态 的 统计 平 
均 . 
如 果 对 任意 t+ E ,ELX?(z)] FE, MERX, E T) 为 二 阶 矩 过 程 . 


2.2.2 (CH) 协 方差 函数 


称 
Cx(s,t) = E([X(s) — mx (s) JLX) — mx (t) J) 
为 {X(),t E T) 的 ( 自 ) 协 方差 函数 ,特别 地 , 称 
CxGt,t) 一 VarLX(CD)] = E([ XG) —mx(t)]2) 
HXO. € T) 的 方差 函数 ,有 时 也 记 为 ox) 或 Dx (2) , 它 反映 了 随机 过 程 的 样 
本 函数 在 1 时 刻 偏离 mx(z) 的 程度 . 
由 于 协 方差 函数 可 以 度量 XG), X 间 的 相依 性 ,也 许 有 人 会 认为 以 下 等 式 
成 立 : 
„lim C(s,t)= 0 (2.3) 
然而 ,后 面 的 例 2. 6 证 明 事 实 并 非 这 样 . 
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2.2.3 (BË) 相关 函数 


你 
Ry y = ELX iN a] 
KPED LXO). t E T) 的 ( 自 ) 相关 函数 . 
由 Schwartz 不 等 式 知 , 二 阶 矩 过 程 的 协 方差 函数 和 相关 函数 存在 , 且 有 下 列 关 
系 : 

Cx (s.t) = Rx(s,t) — mx(s) * mx (t) 

在 实际 问题 中 ,有 时 需要 考虑 两 个 随机 过 程 的 关系 . 此 时 ,需要 引入 互 协 方差 
函数 和 互相 关 函 数 来 刻画 它们 之 间 的 线性 关系 . 

定义 2.3 (XW, E T) 和 {Y(t),t € T) EAN METE, 
Cwlt) = E{[X(s) Sax OLY C ey (t) ]) 
2 € T) AYO. E T) 的 互 协 方差 函数 ， 称 — 
Rea = EXOD] ` ` 

HXO, E T) WYO, E T) 的 互相 关 函 数 ， 

如 果 对 任意 的 两 个 参数 s,t€ T, A Cwlt) 一 0, 则 称 {XCGD) tE DAYO), 
t€ T) 是 互 不 相关 的 . 若 Rxy(s,t) = 0, WRX, t € TAYO. ET) 正 交 . 

互 协 方差 函数 和 互相 关 函 数 有 以 下 的 关系 : 

Cxy (5,1) = Ryxy(s,t) — mx (5s) * my(t) 

【 例 2.6】 2 XG = Acos(wt), 其 中 A 是 一 个 非 负 随机 变量 , 且 ECA) < 
十 50. 试 求 该 过 程 的 均值 函数 和 协 方差 函数 . 
解 均值 函数 为 
m(t) = E(A)cos(ot) 
协 方差 函数 为 
Cx(s,t) = E{[LAcos(ws) J[Acos(w)]) — m(s)m(t) 
= {E(A’)— [LE(A)]}[cos(ws) J[cos(ox)] 
因此 ， 
Cx(s,t) = Var(A)[cos(ws) J[ cos() ] 
显然 ,这 个 过 程 并 没有 式 (2. 3) 描述 的 性 质 . 实际 上 ， 
CovLX(s),X(z)] Cx(s,t) 
VVar[ Xs) ] VVar[ X] ox(s)ox(t) 

【 例 2.7] (脉冲 编码 调制 ) 信号 源 分 别 以 户 和 1 一 户 的 概率 形成 符号 0 和 1， 
且 形 成 0、1 的 过 程 是 相互 独立 的 .符号 0 表示 在 单位 时 间 内 没有 发 送 脉 冲 ;符号 1 
表示 在 单位 时 间 内 发 送 一 个 恒定 幅度 的 脉冲 . 信号 源 在 过 去 就 已 经 开始 运行 . 以 这 


= 1 





OCSyt) 一 
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种 方式 产生 的 一 个 随机 信号 是 由 随机 过 程 {X(i)E (— co, + co)) 表示 的 ,其 中 
xow = YAAG m, n< t—<n+1 (2.4) 
其 中 A,(n 二 0, 土 1, 士 2,*… .) 是 由 以 下 式 子 定义 的 独立 的 随机 变量 : 


a, 概率 为 1 一 
HBA ha) 为 
o Ë 0 S = 1 
h(t) = | ， 否则 
所 以 ,对 于 任意 的 1，, 有 
0, 概率 为 
X(t) = N PTET 
例如 ,图 2. 1 中 的 样本 路 径 是 由 以 下 信号 的 部 分 序列 生成 的 : 
-1011001.… 
该 过 程 具有 恒定 的 均值 函数 


m Sa pRB = atie PX = 0) = ati= 05 
对 于 nn 声 s,t 二 nn 十 1;n = 二 0, 土 1, 士 2,…, 有 

E[X(s) XG) ] = ELX(s)X(t) | X(s) =a] + P{X(s) = a} 

+ ELX(s) X(t) | X(s) = 0] * P{X(s) = 0) 
= a° (1— p) 

Wl m < s< m+ 1,n < t <n+1,m Z n,IJ XC) 与 X(C) 相互 独立 . 
因此 ,随机 过 程 {X(t) í € C— so, + se)) 的 协 方差 函数 为 
pA p) 当下 过 二 1 十 1 一 0 十 1 42, 
0， 否则 


Cx(s,t) = 





0 





人 
图 2.1 脉冲 编码 调制 
虽然 这 个 例子 中 的 随机 过 程 是 一 个 相当 简单 的 结构 ,但 它 在 物理 .电气 工程 、 
通信 方面 是 非常 重要 的 . 
【 例 2.8〗 设 {X,,n 宇 1} 是 独立 同 分 布 的 随机 变量 序列 ,其 中 XX 的 分 布 列 为 
x | 1 | = 
b | Les Em 











a 2 
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ZLY, = 》) Xj, 试 对 随机 序列 {7 ,n 宇 1) 求 ; 

(1)Y, 的 概率 分 布 列 ; 

(DY: 的 概率 分 布 列 ; 

(DY, 的 数学 期 望 ; 

(4)Y, 的 ( 自 ) 相关 函数 Ry(m.,n). 

R (1) 因为 YI 一 Xi, 故 概率 分 布 为 P{Y, = 1)= Z PY, =—1)= 


(2) 因为 Y, = X, + X; ,Y, 可 能 的 取 值 为 0,2 或 一 2. 
P(Y, = 0) = P{X, + X; = 0} = P{X, = 1,X, 1 + PIX = 一 1,X, = 1) 


a 
7 








= P(X, = 1)P(X, =—1} + PIX, =—1)P(X, = 1) 
= SE u. + 
二 二 汪汪 2 
P(Y, = 2) = PIX, +X, = 2) = PIX, = 1,X, —1) = + 
P{Y =—2) = P{X + X, = 一 2) = P(X, = 一 1,X =—1) = 二 


(3)Y, = 2; 的 数学 期 望 为 


n 


EGY Jy (VT) ERX = > ixzT+Cn5 x 去 上 = 0 
j=1 j=1 


2 
(4)( 自 ) 相关 函数 为 


j=1 


Ry(m,n) = E[Y(m)Y (m) ]= E[ YX, 5x] 
j=l k=1 


当 m > n 时 ， 
Ry(m.n) = E| (>: X, + SY) S x ]= BERRY a SS 全 
j=1 j=w+1 k=1 j=1 j=ntt k=l 
=E( KL) +E( LEDA) 
;=1 ; k=1 


j=m+1 
= E(Y:) + E( > X,). E(Y,)= EY?) 
j =n+1 


= DY 9 + [EC J: = DOY; 


因为 D(Y,) =D(ŅX)= X DX,) (X, 相互 独立 ) 
j=1 j=1 


n 


> 1([E(X,2]—[Et(X;) 1) 


j= 


= Ts a S dl. 
EX =y tE 


II 
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E(X) = 1 


所 以 D(Y,) 一》 一 0) 一 7 
j=l 


Ry(m,n) = D(Y, = n 


É 3 m > n 时 ， 
Ry(m,n) = D(Y,,) = m 


F] 2 3⁄ m< n 时 ， 


所 以 Ry(m,n) = min{m,n} 
【 例 2.9】 从 :上 一 0 开始 每 隔 1/2Ss 丢 搬 一 次 硬币 (均匀 的 ) , sJ # — 4 Z BE 65 B 
Zt, 3⁄4 at) ¿ #É H E I 
刻 1， 定 义 随 机 变量 XU) = 
i S AN Don 当时 刻 TTE: 
试 求 :CDF (二 :1 EA (DFF lza). 
i (1) 因为 硬币 是 均匀 的 ,所 以 “出 现 正面 ” 和" 出现 反 面 ” 的 概率 各 为 了 


先 求 下 ( 亏 ,m ) ,显然 


随机 变量 X (去 的 可 能 取 值 只 有 0,1 两 种 可 能 ,于 是 


cl- 中- 十 zz 全 = 小 
所 以 
0, EEN 
(去, )= > o<z<1 
Ls 


z = 1 


再 求 Bl sse ) ,显然 


kia COST, 出 现 反面 全 出 现 反 面 


出 现 正 面 |2, 出 现 正面 


P{X(GD =—1)= P{X() =2)= + 





2 


cs 


所 以 
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(2) HA F(Z olinsa) 


因 为 
0 ,出现 反面 一 1， 出 现 反面 
x(z)- | I xa = | 
2 1 ,出 现 正面 2, 出 现 正 面 
于 是 
1 位 
F[z zum |J= P| )< au XD < z | 
Ti =< Ü, — ee =< To < 志士 ce #, z, Z: 0, z; <— 1 
L. £= 2 =< lary 2 2 或 中 > L, = 1 = So, 2 2 


Wi > læ; 2 2 
【 例 2.10】 给 定 随机 过 程 {X(i)， 一 ce 二 上 到 十 ceo) ,对 于 任意 一 个 数 工 ,定义 
另 一 个 随机 过 程 
1, XG) <<= 
0, XU) > x 
IEY G) 的 数学 期 望 和 相关 函数 分 别 为 随机 过 程 XG) 的 一 维和 二 维 分 布 函 数 
证 明 AXO) 的 一 维和 二 维 概率 密度 分 别 为 fiat) 和 fo Ca zoti to), MI 


十 = x 十 co 
E[Y(CO]=| IOA Dde = | yoOAGzpdr+| yf a: 


Y(t) = | 


一 | fi(xst)dt = F, (x,t) 


Fco fo 
Ry (ti st2) ai ELY (t JY CJ] sf T Yı Yz fe (>, s To $Í) sta ) dz, dz; 


=g 
| 汇丰 tista) 


一 2 


若 考虑 到 对 任意 的 上 ET,Y(G) 是 离散 型 随机 变量 , 则 有 
Ey) = E[Y(t)]= 1. P{Y(t) =1}+0. P{Y(t) = 0) 
= P{X(t) < z=)= F, (x,t) 
Rh +b) = EL YG YG, ) ]= 1 + 1+ P(Y) = 1,Y(z y = 11 
+1.s0s P(Y(a) = 1,Y() = 0)+0+1= Pí(Y(6) = 0,Y() = 1} 
十 0 0。 P(Y(a) =0,Y (t) = 0) 
= P{ XG, ) < tı X(t) < z; ) = Fri ,x ;ti ,ts) 
【 例 2.11] 设 随 机 过 程 {X(i)， 一 co < t <+ co) 44 = £ K š 3 ; 
X(t;©) = 1, XCG,@,) = sint, X(¿,@,) = cost 


E Pil@})} = P(1e;,)) = P116,)) 一 +R R M put 过 程 X(Ci) 的 均值 函数 px A) 和 
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479% h j Rx (ti st). 
解 X() 的 均值 函数 为 
| + (sin F cost). 


山 : 1 1 
ux Ct) = E[X()1=1. 3 上 sint ° 3 十 cost。 3 3 1 











= +a 十 sint + cost) 


相关 函数 为 
Ry lh oh) = ELX YX Q] == Ú e + + sint e sint» ° + + cost, costy 


= L F cos(z#, —t:)] 


aipat XO = X+ Yt, —co <t <—+-so ,随机 向 量 (X,Y) 的 





【 例 2.12] 
协 方差 短 阵 为 | "a XO 的 协 方差 函数 . 
E 


02 
解 ”因为 Cx (t,ts) = E[ XG )X (t) ]— ELX t )] * ELX )] 
而 XL) Xt) = (XY CX Yr.) = X° + XYt, + XY + Y2t t, 
则 ELX()X(ts)]| = ELX? + XYt: + XYt, + Ytt] 
= E(X?) + hx ECY) + (t, + tx) E(XY) 
ECX +Yt,) ECX +Yt,) = LE(X) +, E(Y)][E(X) i ECY)]J 
= [E(X)] HEX) - E(Y) + E(X) + EC(Y) 
+ tit, [EYF 
= [E(X)]* + (ú, +L, )E(X) E(Y) + t, [ECY) ]° 
Cx (ti st) = (E(X°) —[E(X) P} + tit: (E(Y2) 一 [ECY)]2?》 
+ (& +z, )[E(XY) —E(X)E(Y)] 
= D(X) +t DY) + (a +t:)Cov(X,Y) 


=: ol + tto + Ct 十 to)Y 





则 


23 ”随机 过 程 的 分 类 


根据 随机 过 程 的 不 同性 质 , 比 如 是 否 依赖 于 时 间 ,不 相交 的 时 间 段 内 过 程 是 否 
是 独立 的 ,过 程 现 在 或 过 去 的 状态 对 未 来 状态 的 影响 等 ,可 以 将 随机 过 程 分 为 强 平 
稳 过 程 、 弱 平稳 过 程 、 平 稳 增 量 过 程 、 独 立 增 量 过 程 、 高 斯 过 程 .Markov 过 程 等 


类 型 . 
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2.3.1 强 平 稳 过 程 


称 随机 过 程 {X(z) ,+ € T} 是 强 平稳 或 严 平稳 过 程 ,如 果 对 于 任意 的 4 ,ts ，…， 
t, € TT 和 任意 的 h, 且 zt; 十 hE T,# 
CX) Xa) RE)) EX HA), Xt h), XG, +h)) (2.5) 
这 里 “dd” 表示 等 式 两 边 n 维 随机 向 量 的 分 布 相同 . 
由 定义 可 知 , 强 平稳 过 程 的 概率 分 布 关于 时 间 是 平移 不 变 的 . 特别 地 , 当 n== 1 
时 , 式 (2.5) 表明 一 维 分 布 F(x) 不 依赖 于 ,在 这 种 情况 下 ,存在 一 维 分 布 函 数 
F(x) ,使 得 


F,(z) = F(z),t € T (2.6) 

因此 ,均值 函数 和 方差 函数 也 不 依赖 于 1, 即 有 
m(t) 二 E[ X0] =m = 常数 (2.7) 
Var[LX(D)] 三 常数 (2.8) 


2.3.2 HPR 


在 实际 情况 下 ,不 可 能 为 了 验证 一 随机 过 程 是 否 是 强 平稳 过 程 ,而 去 确定 随机 
向 量 组 {X(t ) ,X(ts),… ,X(t,)) 的 联合 概率 分 布 函数 . 因此 , 现 给 出 条 件 稍 弱 的 
弱 平 稳 过 程 : 

如 果 随 机 过 程 {X(t),t € T} 是 二 阶 过 程 ,并 且 满 足 

(1)E[X(t)] = mx = 常数 ; 

(2)Rx (ti,ts) = ELX(1) X(ts)] = Rx lti — t2). 
则 称 {X(z) ;t € T) 为 宽 ( 弱 ) 平稳 过 程 . 

由 于 有 的 强 平稳 过 程 不 是 二 阶 过 程 ,所 以 相对 于 弱 平 稳 而 言 , 强 平稳 是 不 必要 
的 .但 是 如 果 二 阶 过 程 是 强 平稳 过 程 ,那么 它 一 定 是 弱 平 稳 过 程 . 弱 平 稳 过 程 也 被 
称 为 广义 平稳 , 协 方 差 平稳 或 二 阶 平稳 随机 过 程 . 弱 平稳 过 程 更 重要 的 性 质 是 它们 
的 协 方差 函数 、 相 关 函 数 只 与 时 间 差 有 关 . 

本 书 以 后 凡 提 到 “平稳 过 程 ”, 若 不 加 说 明 , 通 常 是 指 宽 ( 弱 ) 平稳 过 程 . 


2.3.3 平稳 增 量 过 程 
记 随 机 过 程 {(X(7),t € TEKE [h ,ts J] EKMEK XG) Xa). 


如 果 对 任意 的 ,ts € T,rt 二 1 € T,z+ t € T,# XG, ++) — XG.) Z XG, 
+r) 一 X(t;), 则 称 过 程 {X(t) ;t E T) 为 平稳 增 量 过 程 . 
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由 此 可 知 ,对 于 平稳 增 量 过 程 , 增 量 XG 十 r) 一 X() 的 概率 分 布 不 依赖 于 t， 
而 只 与 时 间 差 rz 有 关 . 


2.3.4 独立 增 量 过 程 


如 果 对 任意 的 7 = 1,2,3,… ,任意 的 ,tit € T, < t, < + < t, |, Bi HL 
变量 六 (ti )— X) XG, )— X(t) X n) — XG, i) Æ jH H h sr A, 则 称 
(XG): € 了) 为 独立 增 量 过 程 . 


称 随 机 过 程 {X(z),t E 本 } 为 高 斯 过 程 或 正 态 过 程 ,如 果 对 任意 ,ts ，… ,i EE 
T,n=1,2,3,, (Xt) Xt) XG) 是 nn 维 正 态 随机 向 量 .高 斯 过 程 的 一 个 
重要 的 性 质 :高 斯 过 程 是 强 平稳 过 程 , 当 且 仅 当 它 是 弱 平稳 过 程 . 


2.3.6 Markov 过 程 


PEDLEX GO) t E T), 如果 对 4 ys € Taty < tg < *** < tmi + H 

YA; 和 SZ,i=1,2,…,n 十 1, 有 
PIXG a )€ A. |X) E An X ra) E Arato X(N)E A.) 

= P{X m) E Am |X) E A,) (2.9) 
MEK (Xa) € TT} 具有 Markov 性 ,具有 Markov 性 的 随机 过 程 称 为 Markov 
过 程 . 

由 Markov 性 可 知 : 如 果 zi 是 未 来 的 某 个 时 间 点 ,i 是 当前 时 刻 的 时 间 点 , 相 
应 地 sti ,大 ti 是 过 去 的 时 间 点 ,一 个 具有 Markov 性 的 过 程 ,其 未 来 的 发 展 趋 
势 不 依赖 于 过 去 的 演变 ,而 只 与 当前 的 状态 有 关 ， 

当 参 数 集 工 是 有 限 集 或 可 数 集 时 ,Markov 过 程 称 为 离散 时 间 Markov 过 程 , 否 
则 称 为 连续 时 间 Markov 过 程 . 当 状 态 空 间 1 是 有 限 集 或 可 数 集 时 ,Markov 过 程 称 
为 Markov f. 因此 ,一 个 离散 时 间 Markov 链 具 有 离散 状态 空间 和 离散 参数 空间 . 

(XG). € TT} 是 二 阶 过 程 ,如 果 

limE{[X(w +A)= X) }=0, w € T (2. 10) 
则 称 {X(),t € TEAR to 处 均 方 连续 . 

如 果 {X(t),t € TEER E T, 处 都 均 方 连续 , 则 称 过 程 在 T, (T, — T) 内 
均 方 连续 . 

【 例 2.13】 设 Y 是 随机 变量 , 试 分 别 考虑 随机 过 程 X1(1) = Y, X, G) = tY h 
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平稳 性 . 

解 ” 因 为 Y 是 随机 变量 ,所 以 X GQ) 二 了 这 一 过 程 是 一 个 与 时 间 无 关 的 特殊 的 
过 程 , 它 的 任何 nn EDA h 3k Fy(yr,yz tt y.) 都 与 时 间 无 关 , 所 以 是 一 个 严 平稳 . 

因为 Xi (i) 二 了 是 严 平稳 ,所 以 只 要 E[Xi(1)] = E(Y2 ) 一 十 ce, 即 可 得 Xi (2) 

对 于 XA = 1Y， 

E[X: (t) ] = EGY) = 1tE(Y) 
Rx, (ti sta) = E[ X, G )X,G,)] = EG Yt,Y) = nt, EY’) 
与 时 间 tisto 有 关 , 所 以 X, 4) = tY 为 非 平稳 . 
【 例 2. 14】 {XC(n),n 二 0, 士 1,…}) 是 实 的 \、 互 不 相关 的 随机 变量 序列 ,上 且 满足 
ELX(n)] = 0, DLX(n)] = a°. B + 
Remy = iaae P =n 
0; m =+ 
只 与 时 间 差 m 一 n 有 关 , 均 值 为 常数 ,因此 {X(n),n 二 0, 十 1,…)}) 是 平稳 时 间 序 列 . 

在 科学 和 工程 技术 中 ,上 述 的 时 间 序 列 称 为 “ 白 噪声 ” 

【 例 2.15] {X(n),n 二 0, 土 1,…) ZARE, H asasta 为 任意 实数 , 令 
Y(n) = aoXOn) 十 aXX(n 一 1) 十 … 十 arxXX(n 一 ,证 明 :{Y(n),n 二 0, 十 1,…) 是 
一 平稳 时 间 序 列 . 

证 明 显然 E[Y(n)] = 0 

Ry) = EL[Y(n+tr)Y(n)] 
= ELYlaKG r y aa] 


i=0 j=0 


k k 
= Š) J aajE[X(n+r—i)X(n—j)] 


i=0 j=0 


iðra Faa SOSTAR 
Q; 3 z > ËE--1 
只 与 时 间 差 tr 有 关 , 故 {Y(n),n = 0, + 1, ) 是 一 平稳 时 间 序 列 . 形 如 上 式 的 
{1Y(n),n 二 0, 土 1,…}) 又 称 为 滑动 平均 序列 . 
下 面 的 两 个 例子 用 到 了 三 角 公 式 中 的 两 个 加 法 公 于 


cosacosB = > [cos(8— a) + cos(a + 80) ] 


cos(8— a) = cosacos8 十 sinasing 
【 例 2.16] 设 随机 过 程 XX(1) = Acos(wt 十 @), 一 co 二 1 一 十 co, 其 中 A 是 一 个 
有 有 限 均 值 和 有 限 方差 的 非 负 随机 变量 ,而 随机 变量 别 服 从 区 间 [0,2n] 上 的 均匀 分 
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布 , 且 与 A 相互 独立 . 试 证 :随机 过 程 {X(t) ,1 E (— co, + co)) 是 弱 平稳 过 程 . 


2r 
证 明 E[ coslat + @) ] = +l cos(wt + p)dp = Esino 十 p)]|i 一 0 
所 以 均值 函数 为 
m(t) = E[X(t)] = E(A)E[cos(wt + @) ] = 0 
协 方差 函数 为 


Cx(s,t) = E({[Acos(ws + @) [Acos(or + @) ]) 


= E(A’) 去 | costes 十 g)cos(wt 十 9p)dp 
TJO 

= ECA?) ES” 去 {cos[wlt— s)] + cos[e(s+- D) + 2e]}do 
TJ 0 

= ECA: )cosLw(t — s) ] 


并 且 EL[LX’(1)] = Cx(i,t) = > A: <a 


因此 ,此 过 程 是 弱 平 稳 的 . 
【 例 2.17】 给 定 随机 过 程 XX(1) = Acos(wt) 十 Bsin(or), 式 中 四 是 常数 ,A 和 
B 是 两 个 独立 的 正 态 随机 变量 ,而 且 E(A) = E(B) = 0,E(A2) = E(B) = P, 
证 ;XX(1) 是 弱 平 稳 过 程 . 
解 因为 X(t) = Acoslat) + Bsinlat), R A,B 相互 独立 
所 以 E(AB) = E(A) s E(B) = 0 
ELX(1)| = E[Acos(az) ] + E[ Bsin(az ) ] 
cos(az)E(A) + sin(at)E(B) = 0 
Cx (ti st) = ECX ) XX, )] — 0 
= E{[Acos(wt1)+ Bsin(wt1)] * [Acos(wt;) + Bsin(o, )]) 
= ELA’?cos(wti)cos(wts) + ABcos(o )sin(ot;) 
十 BA sin(wti)cos(wts) + B°sin(oti)sin(aot,) ] 
= cos(a i )cos(at I )E(A2) + cos(w)sin(wt, )E(AB) 
+ sin(wti)cos(wts)E(AB) + sin(wti)sin(wt, )E( B°) 
= ø’ cos(wti)cos(wts) + o sin lwt: )sin Cat) 


= ø cos[wlti — t>) ] 
并 且 ELNEGY] = CyGgy= 2 2k a 
所 以 ,此 过 程 是 弱 平 稳 的 . 
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2.4 平稳 随机 过 程 的 遍历 性 


考虑 如 下 两 个 平稳 过 程 ， 
X= {Xn = 0,1,2,.) 
其 中 X, 为 独立 同 分 布 随 机 变量 序列 ,E(X?) <+ co ,E(X,) = m,n = 0,1,2,1; 
Y = IY, = Yom = Opli} 

其 中 Y 是 随机 变量 ,E(Y?*) <+ eco. 

这 两 个 随机 过 程 是 平稳 过 程 中 的 两 个 极端 情况 ,可 以 用 这 两 个 过 程 来 阐述 不 
同 平稳 过 程 之 间 的 差异 . 

由 大 数 定律 知 ,对 X 而 言 , 有 


Lx FX kek Xa) 


以 概率 收敛 于 常数 mx; 但 对 Y 过 程 来 说 ， 
=(Y, EY as t. y = Y 


即 经 过 对 时 间 的 平均 后 ,随机 性 没有 什么 改变 . 于 是 自然 产生 这 样 的 问题 :对 平稳 
过 程 加 上 什么 条 件 后 ,对 时 间 的 平均 值 可 以 等 于 过 程 的 均值 ?这 一 问题 称 为 平稳 过 
程 的 遍历 性 问题 ,这 是 平稳 过 程 研究 中 的 一 个 重要 内 容 , 其 重要 性 可 从 如 下 粗略 的 
分 析 中 看 出 : 

IFILL), ~< t <+}, HF ELX] = m, Hiirt m, i 
IXO, — o < t <+ co) 做 大 量 的 观测 . 记 X, (2) 3228 i K rH BJ 2] z 的 值 ,由 


大 数 定律 知 , 可 用 韦 > X, G) 来 估计 m. 同样 为 了 估计 相关 函数 RC), 可 用 








N 
N 27X,G) X,G + r) 来 售 计 . 
i=1 


但 是 这 样 的 计算 需要 对 一 个 随机 过 程 重复 地 进行 大 量 观察 ,以 便 获取 很 多 样 
本 函数 X O ,而 这 在 实际 中 是 非常 困难 的 ,于 是 自然 希望 在 很 长 时 间 内 观察 得 到 
一 个 样本 函数 ,由 这 一 次 观察 来 估计 均值 和 相关 函数 . 对 于 一 般 的 随机 过 程 这 是 不 
可 能 的 ,但 根据 平稳 过 程 不 随时 间 的 推移 而 变化 的 统计 特性 则 是 可 能 的 ,只 要 加 上 
一 些 条 件 , 就 可 以 从 一 次 观察 中 得 到 m 和 Rx(r) 的 较 好 的 估计 . 

根据 随机 过 程 的 定义 ,对 固定 的 :+€ T, XG 是 一 定义 在 样本 空间 Q 上 的 函数 ， 
即 为 一 随机 变量 ,ELX(D] = mx(?) 为 统计 平均 ;对 于 固定 的 wE Q,X(.,w) 是 一 
个 关于 参数 上 E 工 的 函数 , 若 在 了 上 取 平 均 , 则 为 时 间 平 均 . 

本 节 给 出 的 遍历 性 定理 指出 :对 平稳 过 程 而 言 ,只 要 满足 一 些 较 宽 的 条 件 , 那 
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么 均值 函数 和 相关 函数 实际 上 可 以 用 一 个 样本 函数 在 整个 时 间 轴 上 的 时 间 平 均值 
来 代替 ,也 就 是 用 随机 过 程 的 时 间 平 均 来 代替 其 统计 平均 . 
定义 2.4 R(X), co 过 上 < 二 ce) 是 平稳 随机 过 程 ,如 果 
X = Lim XD = mx a (iD 
即 x — 
lm ELI gpf Xde my l) = o 
则 称 {X(2), — co < t —+ so) 的 均值 具有 遍历 性 . 
定义 2.5 设 {X(), 一 00 二 + 过 十 2) 是 平稳 随机 过 程 ， 如 果 
Rn = li m s= Tl XrnXd RO G1 
即 —Ç x 
lim ELI >|. a =o 
Tero Piy ; . 
则 称 {X(CD ,一 se <t <+ se) 的 相关 函数 具有 遍历 性 , 


os 如 果 随机 过 程 {(X(1) ,一 oo 过 + 十 0) 的 均值 函数 和 相关 函数 

均 具 有 痪 历 性 ， 则 称 该 随机 过 程 具有 遍历 性 ， 或 者 说 是 各 态 历经 的 . 
遍历 性 直观 上 可 以 这 样 理解 :考虑 只 ! 有 有 限 个 状态 的 平稳 序列 {Xn = 0, 
土 1, 土 2,…) ,其 状态 空间 了 二 {ei ,ez,…,es}, 则 wm = E(X,) 是 各 个 状态 的 加 权 平 
均 .者 令 AN = {X,, 一 N 志 nNN}, 则 由 遍历 性 可 知 ,对 几乎 每 个 样本 , 当 NN 很 大 
时 ,A、 中 的 元 素 历经 工 中 各 个 状态 ,而 且 当 N 一 十 ce 时 ,Aw 中 的 元 素 为 状态 e; 的 


频率 趋 于 po 从 而 As 中 元 素 的 平均 Xs 一 ZT DX, 趋 于 过 程 均值 m 


2N 
b 
= Dl piei. 
i=l 


关于 定义 2.4, 定 义 2.5 中 的 式 子 , 当 XO 只 取 非 负 实数 或 整数 时 ,相应 的 积 








X= Lim 于 | xoa = mx 
或 
【 例 2.18] 设 随机 过 程 {(X(7) = Pe 十 9) ,一口 之 1 之 十 co}, 其 中 A,w， 
9 是 相互 独立 的 随机 变量 ,E(A) = 2,DA) = 4,w ~ U(—5,5),p~U(— r,r), è} 
H(X), — co < t <+ so) 的 遍历 性 . 
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解 (1) mx (t) 一 下 LX(CD)] = ELAcos(wt + @) ] 
= E(A)E[Lcos(wt + @) ] 


1 5 n 
<= . . = 0 
2 70x i S cos(ot + p) dwdg 


Cy Rx(t,st +r) = E[XG(2 X(t + z) ] 
一 下 [Acos(w + gp)Acos(wt + wr + g) ] 





= FE(A’)ELcos(ur) 十 cos(2w + wr + 29)] 





=. 1, 十 | COs(wr ) dw 
2 TOJ- 

— 4sin(57) _ Rele) 
Dr 


CIJELA N = Rs, = Rx(0) = 4 —+ co, 
由 (1),(2),(3) 知 {X(t) , — se < t <+ co) 是 平稳 过 程 , 故 
=== 1 


I= hl imf Acos(et + 9)dt 


A 
= =li m zrn eT) coso 


= 0 = mx 


T 
R€) = Li. ml, Acos(at + g) * Acos(at + az + p)dt 


T 
= =li m A cos(wt + o) * cos(wt + wrt p)dt 


2 
= 今 cos(or) = RyCO) 


B]. XG). — oo < t <+ co) 的 均值 具有 遍历 性 ,但 相关 函数 不 具有 遍历 性 . 

由 遍历 性 的 定义 ,很 自然 要 间 式 (2. 10) K (2.11) 左边 极限 是 否 存在 ?如 果 极 
限 存 在 ,而 且 等 式 左边 是 随机 变量 的 均 方 极限 ,那么 自然 要 问 在 什么 条 件 下 它 能 等 
于 常数 mm? 关于 第 一 个 问题 , 主要 是 数学 上 的 考虑 . 1931 年 Birkhoff 证 明了 只 要 
E L| XGO 上 去 十 se, 则 对 几乎 所 有 的 样本 , 式 (2. 10) 左边 的 极限 一 定 存在 . 第 二 
个 问题 就 是 本 节 所 要 解决 的 问题 . 
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均 信和 具 有 沁 历 性 的 充 要 条 伯 是 


证 明 
由 于 离散 场合 和 连续 时 间 场 合 证 明 思 路 相同 ,所 以 现 仅 证 明 连 续 时 间 的 均值 
遍历 性 定理 . 首先 计算 X(z) 的 均值 和 方差 , 记 


a 1 [T 
Xr = s| xoa 


则 
EZ =L i ELX) Jd: = 
2T J-r 
下 面 计算 X() 的 方差 ， 


T 2 E i 
Var(X) = E|] Xod) FNE. (J ECX Jdz)2 
z k 


4T? 





k= = E: LR — [XG Thdid 


1 T T 
= Bf | c: 全 一 的 dd 


在 上 述 积分 中 , 令 * — tsu 二 1 十 s; 则 变换 的 Jacobi 行列 式 值 为 亏 , 积 分 区 
域 变换 为 D = {一 2T < + o < 2T) ,注意 到 Cx(r) 是 偶 函 数 , 故 上 式 可 简化 为 


2T 
THSC ode = | CxO T- z Ddr 
J ; 








= 未 | ODT- Ddr = A| Cx(oDG 一 否 )dr 


=-= E Cx(t— s)dtds 


故 关 于 均值 遍历 性 定理 就 化 为 上 式 极 限 是 否 趋 于 零 的 问题 ,由 均 方 收敛 定义 知 这 
确实 是 等 价 的 ,从 而 证 明了 定理 . 

【 例 2.19] 已 知 随机 电报 信号 XO), C ELEXA] 一 0,Rx(r) = ell, H 
XG) 的 均值 是 否 各 态 历 经 . 





i 2. 8. 
解 uim 证 |， (1— z JCx()4e 
= Ë t = = w. L PEEB 
-a 
<= s 1 人 T [zl 
m Fh (1—7) de 
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—2aT 





o 1731 1—e 
Alim rir wr)’ 


关于 相关 函数 Rx(z) 的 遍历 性 定理 ,可 以 考虑 随机 过 程 {Y.(， 一 co 二 上 去 
+o}, A P Y.O 一 XG 十 rz)XCD， 则 下 [LY.()] = Rx (z), TÆ H E ë 32 4Ë A kk 
定理 ,可 得 相关 函数 的 遍历 性 定理 . 











【 例 2.20] AXO) = cosl +y), — <t <+}, $ P E~ N(0.1), 
7 一 U(0,2r) ,87 相互 独立 , 试 证 :{X(GD， 一 co < t <+ co) 的 均值 具有 遍历 性 ， 
证 明 
Dmx) = ELX(1)] = E[£cos(@ + g) ] 
= ECE) EL cos(@ +] = 0 
(2)Rx(Ctt 十 r) = E[ XG)XG + e) ] 
= E(# )E{cos(Æ + ?)cos[8G + z) + 7]) 


2 —E[cos(8) + cos(2B + B + 29] 
= cos(8&:) = Rx (r) 


(3)E[X2(D)] = Rx (tt) = 5 < oo 
由 (1),(2),(3) (XG), — co < i <+ co) 是 平稳 过 程 ,又 因为 


1 ¿T e 
üm = | (1 于 [Rx (z) 一 0]dr 


了 -十 co 

二 
Jim | (1 IT) LZS Jae 

= ia Allia ad 

= lim |+ (1 zT Sinar) groen) | 
"A 

= Jim Jap! cos (2T) ] 

= 0 

所 以 {XG ,一 co < t <+ so) 的 均值 具有 遍历 性 . 


2T 





0 





= 


[s 


CD 


A 


n 


[ez] 


~ 
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J A 2 


.随机 过 程 {X(C) ,ty 之 0) 的 一 维 概率 密度 函数 为 


F(x) = P{(XW < z) = 1— e 0 x > 0 
此 过 程 是 弱 平 稳 的 吗 ? 


. 随机 过 程 {X(t) t> 0) 的 一 维 概率 密度 函数 为 


F(x) = P(X) < z) = 





1 | eT du 
2 她 —°° 
# Fe 2> 0, a > 0,z € (一 co 十 ce). 求 它 的 均值 函数 mx (t). 


. 令 XCGD) = Asina 十 @), 其 中 A 和 是 相互 独立 的 非 负 随机 变量 ,上 且 BB 服从 区 


间 [0,2x] 上 的 均匀 分 布 ,E(A?) <+ eo. 
(1) R(X), t € C— co, + so)) 的 均值 函数 , 协 方差 函数 和 相关 函数 . 
(2) 随机 过 程 {X(t),t € (一 co, 十 co)}) 是 弱 平 稳 的 还 是 强 平稳 的 ? 


.& XG) = A(z)sin(at 十 BB), 其 中 对 Yt,A(t) 和 是 相互 独立 的 非 负 随机 变量 ， 


服从 区 间 [0,2x] 上 的 均匀 分 布 .证 明 :如 果 {A(1),t€ (一 co, 十 oo)) 是 弱 平稳 
过 程 ,那么 随机 过 程 {X(t),t € (一 co, 十 oo)} 也 是 弱 平 稳 过 程 . 


。 {ai saz CQ EXA JFZ, {D D AT: 1 是 相互 独立 的 , 且 服 从 区 间 [0,2x] 


上 均匀 分 布 的 随机 变量 组 成 的 序列 . 求 随机 过 程 {XC(2),t € C— co, + co)) 的 协 
方差 函数 和 相关 函数 ,其 中 XG) = Yasin + @). 


MO E (XG) = 了 AshC 一 1)， 一 oo 二 1 二 二 oo}, 其 中 A 是 相互 独立 同 分 布 


1, o<:<— 


05 其 他 

(1) 画 出 过 程 {(X(1),t € (一 ce, 十 co)) 的 一 条 可 能 的 样本 路 径 ; 

(2) 求 此 过 程 的 协 方差 函数 ; 

(3) AYA = 二 X(t 一 2Z), 其 中 随机 变量 Z 服 从 区 间 [0,1] 上 的 均匀 分 布 ,随机 过 
P(Y), t € (一 00, 十 co)}) 是 弱 平 稳 的 吗 ? 


的 随机 变量 ,只 取 值 一 1 和 十 1, 均 值 为 0, 目 h(iz) -| 


. (XO,tE (一 cc, 十 ce)) 和 {(Y(D)tE (一 ce, 十 co)) 是 两 个 独立 的 弱 平稳 随机 


过 程 ,它们 的 均值 函数 均 为 0, 且 有 相同 的 协 方差 函数 Cx (7). 
证 明 : 随 机 过 程 4Z(i) í € C— co, + co)) 是 弱 平 稳 的 ,其 中 
Z(t) = X(t)cos(wt) — Y (t)sinlat) 


.六 (zt) = sin(t), £ F o £ KELO, 2r] 上 服从 均 久 分 布 , 证 明 : 


(1) 离散 时 间 随 机 过 程 {XX(1) ,t 二 1,2,…) 是 弱 平 稳 的 ,但 不 是 强 平稳 的 ; 
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(2) 连续 时 间 随 机 过 程 {X(Ci) .: > 0) 既 不 是 弱 平 稳 也 不 是 强 平稳 的 . 
9.{X(2),t € C— so, +co)) PY), t € (一 co 十 co)} 是 两 个 独立 的 随机 过 程 ， 
它们 的 均值 函数 和 协 方差 函数 分 别 为 mx(t) amy) 和 Cx(s,1t)、Cy(s,1) ， 令 
UG = XOY, VCD = XAY), t € (一 co, 十 50). 求 随机 过 程 {U(z)， 
t€ (—co,+eo)) 和 {V(t),t € (一 co 十 ce)}) 的 协 方差 函数 . 
10. 随机 过 程 {X(1) = Asint+ Bcost,t € R), 其 中 ,A, B 是 均值 为 0 且 不 相关 的 随 
HLE, H E?) = E(B). 斌 讨论 XO) 的 遍历 性 . 
11. 2 X, 的 概率 密度 函数 是 f(z) = 2<xl >o >» nanl, XX, Xas X, 是 
(1—X,, 1) 上 的 均匀 分 布 . AK AR: (X,, n> 0) 是 具有 均值 遍历 性 的 平稳 过 程 . 
12. t F Rat EXO), — co < t <+ o}, ELX] = 0,Rx(r) = Ae “I 中 (1 十 
a|r|),# P.A, a 是 正常 数 . 试问 XO 的 均值 是 否 具 有 遍历 性 . 
13. 随机 过 程 {X(z),t C€ R) 在 每 个 长 度 为 工 的 区 间 [(n 一 1)T,nT],n = 0, + 1, 


土 2,… 上 的 取 值 为 1 或 二 1, 且 P{(XCD) 二 1) 一 PIXCD) 一 一 1) = 到, 一 DT 


二 tt 过 nT, 且 在 不 同 区 间 上 的 取 值 是 独立 的 , 间 {X(z),t € R) 是 否 为 平稳 过 程 ， 
其 均值 是 否 具有 遍历 性 ? 


第 3 齐 Poisson 过 程 


Poisson 过 程 是 一 类 较为 简单 的 时 间 连 续 、 状 态 离散 的 随机 过 程 ,最 早 于 1837 
年 由 法 国 数学 家 Poisson 引入 ,并 以 他 的 名 字 命 名 . Poisson 过 程 是 一 类 最 重要 且 应 
用 广泛 的 计数 过 程 , 很 多 具有 独立 增 量 性 和 平稳 增 量 性 的 计数 过 程 ,只 要 在 同一 时 
刻 没有 两 个 或 两 个 以 上 的 事件 同时 发 生 ,都 是 Poisson 过 程 . 


3.1 >=> Poisson 过 程 





Poisson 过 程 是 计数 过 程 的 重要 类 型 之 一 ,其 定义 如 下 ， 


由 定义 3. 2 中 的 条 件 (1) 可 知 ,随机 事件 是 从 0 时 刻 开始 计数 的 ,条 件 (3) 是 过 
程 成 为 Poisson 过 程 的 直接 理由 , 式 (3.2) 表明 齐 次 Poisson 过 程 是 平稳 增 量 过 程 ， 
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B ELN] = >A = ELNO ,所 以 可 认为 4 是 单位 时 间 内 事件 发 生 的 平均 次 


数 , 故 称 为 Poisson 过 程 的 强度 或 速率 , 它 表 明 随 机 事件 发 生 的 频繁 程度 . 

[@J3. 1] 在 对 随机 服务 系统 中 排队 现象 的 研究 中 ,经 常用 到 Poisson 过 程 的 
模型 ,例如 到 达 某 服务 设施 的 人 数 , 到 达 电 话 总 机 的 呼叫 次 数 ,都 可 以 用 Poisson 过 
BRRR. 例如 顾客 以 人 一 4 人 /hh 的 速率 到 达 某 商店 ,该 商店 上 午 9:00 开门 . 试 求 
9:30 时 仅 到 一 位 顾客 ,而 到 11:30 时 总 计 已 到 达 5 位 顾客 的 概率 . 

解 以 小 时 为 计时 单位 , 并 以 9:00 作为 起 始 时 刻 , 所 求 事件 可 表示 为 
(N(0.5) = 1,N(2.5) = 5). 其 概率 为 

P{N(0.5) = 1,N(2.5) = 5) 
= P{N(0.5) = 1,N(2.5) — N(0.5) = 4) 


— 4 3400. a x (4 x 2)* e 
1! 4! 


〖 例 3.2] 通过 十 字 路 口 的 车 流 可 看 作 Poisson 过 程 , 如 果 1 min 内 没有 车 通 
过 的 概率 为 0.2, 求 2 min 内 有 多 于 1 辆 车 通过 的 概率 . 
O ENOAR, +] 内 通过 的 车 辆 数 ,{N(t),t 宇 0) 是 Poisson 过 程 , 则 








= 0.0155 





k 
PIND = h) = 2 er 
k! 
PING) = 0) = e = 0.2, ) = In5, A 6 
P{N(2) >1) 


1= PI N€2) = 15 
=1—P(N(2) = 1}— P{N(2) = 0} 


1 0 
En -2 ga aa 


= 0. 83 
为 什么 实际 中 有 这 么 多 现象 可 以 用 Poisson 过 程 来 描述 呢 ? 这 是 根据 小 概率 事 
件 原理 推导 出 来 的 . 在 第 1 章 中 已 经 指出 ,n 重 Bernouli 试验 中 ,如 果 每 次 试验 成 功 
的 概率 户 很 小 ,而 试验 的 次 数 ， 很 大 时 ,二 项 分 布 会 逼近 Poisson 分 布 . 这 一 想法 很 
自然 地 可 以 推广 到 随机 过 程 的 情况 . 在 很 短 的 时 间 内 事件 发 生 的 概率 很 小 ,但 假如 
考虑 很 多 个 这 样 很 短 时 间 的 连接 ,事件 的 发 生 将 会 有 一 个 大 致 稳定 的 概率 . 为 此 ， 
引入 Poisson 过 程 的 第 二 种 定义 . 
IX 3.3 称 一 个 N(0) = 0 的 计数 过 程 {N(z),z 宇 0) 为 强度 为 4(4 > 0) 
的 齐 次 Poisson 过 程 ,如 果 它 满足 下 面 三 个 条 件 : 
(DING), Z 0) 是 平稳 独立 增 量 过 程 ， 
(2) X h0, PING, t +h) > 2) = o(h); 
(DPIN, Hh) =1} =h Hoh) ° 





1 
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从 逼近 的 观点 看 ,条 件 (1) 说 明 试 验 是 独立 的 , 且 在 每 个 长 度 相同 的 小 区 间 上 
事件 发 生 的 概率 是 相同 的 ;条 件 (2) 表明 事件 是 一 件 一 件 发 生 的 ,在 同一 瞬间 同时 
发 生 多 个 事件 的 可 能 性 很 小 ;条 件 (3) 说 明 事件 发 生 的 概率 zp 二 ,而且 p 很 小 ,不 
发 生 的 概率 为 1 一 p = 1 一 .这 正好 是 Beruouli 试验 的 模型 . 

若 观 测 区 间 是 [0,j, 将 观测 区 间 分 成 N 个 长 度 相同 的 区 间 , 每 个 区 间 的 长 度 h 


=% : 则 当 N 一 十 ce 时 人 一 0, 且 由 条 件 (2), (3) 可 知 , 每 个 区 间 可 看 成 一 次 


Bernouli 试验 ,而 由 条 件 (1) 可 知 , 这 N 次 Bernouli 试验 是 独立 同 分 布 的 ,从 而 [0， 
t] 上 事件 发 生 的 次 数 服从 二 项 分 布 , 且 当 N 一 十 oo 时 ,二 项 分 布 的 极限 是 Poisson 
分 布 . 
定义 3. 3 与 定义 3.2 相 比 ,更 容易 应 用 到 实际 问题 中 ,作为 判定 某 一 现象 是 否 
能 用 Poisson 过 程 来 描述 的 依据 . 因为 定义 3. 3 中 的 条 件 (1),(2),(3) 只 需 通过 基 
于 自然 规律 的 定性 推理 即 可 得 到 验证 ,而 不 需要 定量 调查 ;而 一 般 很 难 验证 定义 3. 
2 中 的 (3) ,定义 3.2 常常 应 用 在 理论 研究 中 . 
定理 3.1 Poisson 过 程 的 两 种 定义 是 等 价 的 
接 下 来 ,名 给 出 Poisson 过 程 两 定义 等 价 的 严格 的 数学 证 明 ， 
证 明 ” 先 由 定义 3. 2 推导 定义 3.3, 要 证 明 齐 次 Poisson 过 程 满足 定义 3. 3 的 
条 件 (1),(2),(3), 只 需 证 明 其 满足 条 件 (2) 和 (3) 即 可 .由 定义 3. 2 可 得 : 
PING, 2 h) > 9) = aS WY = aS a 1 < 2 = olh) 
PIN(t,t+h) = 1) = AN = 1) 








+< 
— ea À At _ CAD" 
= D 22 S 


= AAt[1 — AAt +0lAt)] = AAt o( At) 
其 次 , 若 计数 过 程 满足 定义 3.3 中 的 条 件 (1),(2),(3) ,下 面 证 明 它 也 满足 定 
义 3.2 中 的 三 个 条 件 . 
可 以 看 出 ,只 需 验 证 * = 0 时 式 (3. 2) 成 立即 可 . 因此, 记 
pi(t) = P{N(0,t) =i} = PING = i}; i= 0,1,. 
下 面 证 明 p = QD ei =pl (3.3) 
因为 
b G h) = PING +h) = 0) 
= P(N) = 0,NG(¿,t+ h) = 0) 
= P(N( = 0)P(NGt,t+ h) = 0) [条 件 (1)] 
= po lt) po (h) 
= po (1)(1 一 视 ) 十 oC(h) [条 件 (2) 和 (3)] 
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因此 
ogn 





PUTR PD = àbo co- 922 


boa) =— àpo (t) 
H p. (0) = 1, 解 得 方程 :po(t) 一 @e*,t 宇 0 
所 以 i = 0 时 式 (3.3) 成 立 , 同 理 ,i 宇 1 时 ,有 
pi(t+h) = P(NG +h) = i} 
= PIN(t) =i,N(t,ti+h) = 0}+ P{N(G) = i—1,NG(t,t+ h) = 1) + 


SIPING) = i—k,N(,t+h) = k) 


k=2 


= pi(t) po (h) + pai t) pi(h) + o(h) 
= pi(D( — Ah) + pii (Ah + o(h) 


于 是 
外 一 人 LAAD pa (D) + oh) 
Sho 
pi) =— Alp: a) — p t) ]; i= 1,2, (3.4) 
由 po G) = e 2 开始 ,利用 归纳 法 即 可 证 得 
pa) = = ERF 


【 例 3.3] 从 以 往 的 观察 可 知 ， pa I 内 发 生 交通 事故 的 个 数 NGi) 可 以 描 
述 为 Poisson 过 程 {N(1) ,i > 0), 平 均 每 4h 发 生 一 次 事故 , 即 过 程 的 强度 二 
0.25(h '). 求 事件 “[0,10] 内 最 多 发 生 1 次 事故 ,[10,16] 内 最 少 发 生 2 次 事故 ， 
[16,24] 内 没有 事故 发 生 ” 发 生 的 概率 p( 单 位 :h). 

E ”因为 {N(t),t 宇 0) 为 平稳 独立 增 量 过 程 ,于 是 

p= P(N(10) —N(0) <1,N(16) — N(10) > 2,N(24) — N(16) = 0) 

P(N(10) — NO) <1}P{N(16) — N(10) > 2)P(N(24) — N(16) = 0) 
P{N(10) < 1) P(N(6) > 2) PI N(8) = 0}. 


P{N(10) < 1) = P{N(10) = 0) + P(N(10) = 1) 
== 0 “十 到 25 X 10 X ex — 0, 2873 
P{N(6) >2) = 1 — e™? — 0, 25 X 6 X e 0256 — 0, 4422 
P{N(8) = 0) = ex = 0, 1353. 
因此 ,所 求 概率 p = 0. 2873 X 0. 4422 X 0. 1353 = 0. 0172. 
【 例 3.4】 设 在 时 间 区 间 [0,t] 内 到 商店 的 顾客 数 N(1) 服从 强度 为 A 的 
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Poisson 过 程 ,每 个 顾客 购买 货物 的 概率 为 ,不 购 货物 的 概率 为 1 一 p, 且 与 其 到 达 
时 间 是 独立 的 ,也 与 其 他 顾客 的 购买 行为 是 独立 的 . 令 Y(t) 为 [0,t] 内 购买 货物 的 
顾客 数 , 证 明 : {Y(1) ,rz 二 0) 是 强度 为 Ap 的 Poisson 过 程 . 

证 明 (1) 显然 Y(0) = 0. 

(2) £ X, 表示 第 i 个 顾客 是 否 购买 货物 的 情况 , 则 X, 相互 独立 且 服 从 共同 的 


ND 


参数 为 户 的 两 点 分 布 , 且 Y(i) = JX. 


i=1 


V0 — t, < t,*** < t, YG) 的 一 组 增 量 为 


N(az,) 
Yit) — Y(t) = X; 
i=N ) 十 1 
NG) 
YG YY >, X; 
i= NG 1)+1 


由 X, 相互 独立 和 Poisson 过 程 N(1) 的 独立 增 量 性 可 知 , 增 量 
Y(t) — Y(t) Y(8) — Y(t,) | Y Cta) —Y(t,-4) 
是 相互 独立 的 . 
(3) V r> y> 0 


十 cx 


P(Y(0 —Y(s) = k} = YPNO) 一 NG) = i P(Y —Y (s) = k | NG) — Ns) = i} 


i=k 


Es — yi 405 
== ED [a 2] e€ CŒp' a — p) 
i=k ` 





_ je il We 
之 aaa O 





-Soe p ap 
2 G= k) 





_ DG— mran eap) 
k! 





_ Aa sp] emm? 
k! 


Fp YG) — YC) 服从 参数 为 4(1 一 s)p 的 Poisson 分 布 . 
由 (1)(2)(3) T, (Y), t 宇 0) 为 强度 为 Ap 的 Poisson it £. 
【 例 3.5] (NG), t> 0) 是 强度 为 A 的 齐 次 Poisson 过 程 ,证 明 : 在 已 知 


NG) 二 nn 的 条 件 下 ,[0,s] 内 事件 发 生 的 次 数 N(s) 服从 二 项 分 布 B(n Sjaak 
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= > _ P(N(s) =k, NA) =n} 
PINC = k | N(ë) =n} PING = n) 





_ P{N(s) = k, N(s,) = n—k)} 
PING) = n) 
P{N(s) = k}P{N(s,t) = n— k} 
PINA) = n} 
CAS a LACE SNT i 
kI (a= À 
A)” w 
n! 











得 证 . 
下 面 的 例子 用 到 了 双 曲 正弦 和 双 曲 余弦 函数 : 
二 一 z (we, o) 


£" 一 全 
5 GOSh = 





sinhz = 
【 例 3.6] C 随机 电报 信号 ) 若 一 个 随机 信号 Xa) 满足 
X= Y (= DA 0 
其 中 {NGCD) ,tt 人 0) 是 强度 为 1(A 二 0) 的 齐 次 Poisson 过 程 ,Y 为 二 元 随机 变量 ,与 





NG) 独立 且 P{Y = 1} = PtY—— 1} = 2 , 则 称 这 种 随机 信号 为 随机 电报 信号 . 
随机 电报 信号 是 产生 复杂 信号 结构 的 基本 单元 ,明显 地 ,XX(1) 二 1 或 XX(1) 一 一 
1,X(CO) = Y; 图 3, 1 所 示 为 在 Y = I 06 08 = b; = 2 的 条 件 下 ， 随机 过 程 
(X,t > 0) 66 — £## K Buiš x = rlt). 
x(t) 







— 






1 
1 
I 
E 


1 
1 
[一 


图 3.1 随机 电报 信号 的 样本 轨道 
下 证 {X(t) ,t >00) 为 宽 平稳 过 程 ;: 
Q k| XW |? =Y: =1—<+c<so°£,V:> 0, (X00) 为 二 阶 过 程 . 
© æ IG) = (— 1) , 则 均值 函数 
m(t) = ELX(1)] = E(Y)E[I(z)] 
X E(Y) 二 0, 因此 mt) = 0. 
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@) Vs, £ >00 
Cx(s,t) = Cov[ X(s) , X(¢)] 
= E[X(s) XG) ]= E[YI (YI) ] 
= E[Y2IGs)IGO J= Er(Y2 )E[IC(s)IGO J 
m jt P EY )= 1, 所 以 Cx(s,t) = EL[I(s)1(1)], 要 求 Cx(s,t) HA, FAAR 
(I(s),1(z) ) 的 联合 分 布 和 I(1) 的 概率 分 布 . 
Poisson 事件 发 生 时 ,T(t) 完成 一 次 从 T(t) = 一 1 到 了 I(t) = 二 1, 或 从 I(1) 二 1 到 
IGO) =— 1 的 转变 , 即 当 N(t) 跳跃 时 ， 


十 ce 





P(IG) = 1) = PI([0,:] 内 有 偶数 次 跳跃 } wH = e™ cosh (àt ) 
同 理 ， 
a ew A =a 
P (IG) = P([0,:] ñ £ # 3 X 3k s£ ) > QT ° iha) 
因此 ， 


ELI] = 1+ P(IG) = 1) + C— 1) 。P(TIG) 一 一 1) 
= e™[cosh(àt) — sinh (àt) ] = e 
利用 条 件 概 率 和 {NN(z) ,t > 0) 的 平稳 增 量 性 可 知 , 若 s < t, Wl 
P. a = P(I(s) = 1,IG) = 1) 
= P{I(s) = 1) P(IG) = 1 | IGs) = 1) 
e ~ cosh(s)P{ (s,t] A A 45 3⁄ k gk s£ ) 
= e *'cosh(Às)e 2 >” cosh[A C — s) ] 
= e “cosh(AÀs)cosh[ AG; — s) ] 


类 似 地 ， 
bım = P(I(s) = 1,1(1) =— 1) 一 ecosh(Os)sinh[LMG 一 s)] 
pana = P{1(s) =—1,1(1) = 1} = e wsinhQs)sinh[ AG — s) ] 
pa = P(I(s) =— 1,IG) =—1) = e*sinhQs)cosh[A G — s) ] 
此 时 ， 
E[IGs) IGO) ]= pia + pam + baa + pan 
所 以 ， 


Crist) = eat si 
由 于 $ 5 t 的 顺序 可 变 , 故 Cx(s,t) = er 
即 证 {X(t) t > 0) 为 弱 平 稳 过 程 
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3.2 Poisson 过 程 的 可 加 性 和 可 分 解 性 


假设 到 达 某 服务 系统 的 顾客 有 n 个 不 同 来 源 ,比如 :到 达 某 银行 的 顾客 来 自 n 
个 不 同 的 小 镇 ,共有 种 类 型 的 汽车 到 达 某 汽车 保养 维修 店 , 则 每 个 小 镇 顾客 或 每 
种 类 型 汽车 的 达到 都 是 计数 过 程 . 令 {N;(2) ,1 > 0} ,i = 1,2,…,n, 表 示 相 应 的 计 
数 过 程 , 则 [L0,tj] 内 达到 某 服务 设施 总 的 顾客 数 是 NG = N Ci 十 Ns (O + 4 
N, (1),t > 0. dee t 宇 0} 是 强度 为 4; 的 齐 次 Poisson 过 程 , 且 相 互 独立 , 那 
么 计数 过 程 {N(1),t 宇 ei Poison iMt 








是 强度 为 》 — í 
证 明 

(1)N(0) = N,(0) 十 Na(0) 十 … 十 N,(0) = 0 
IYO < 8. < b < =< bi < tadi 


N(t) — NG) = 2>)[N,G) — Ni(n)] 
isi 


N Gnd) — N Gma) = JLN: Gn) — N: tma) ] 
£= 1 


H Ni Ci 一 1,2,…,7 为 Poisson 过 程 可知 , 增 量 N; G) — N: t), N; Ct) — 
Ni(tz) N: En) — N: Gmi) 是 相互 独立 的 , 且 N, GO). = 1,2,…,n 是 独立 的 
Poisson 过 程 , 从 而 增 量 NG) — NG), NG) 一 NG) 5 N GOn) — Nn) 也 是 
相互 独立 的 . 

Vit > 0,88 


NG +h)— NG) = DLN + h)— N; )] 
i=1 





NC +h)— NC) = DIEN: +h) — N: t) ] 
i=l 


N: +h) — N; t) Z N,G +h) — Ni(ts) ,i = 1,2,.,n 
所 以 
NG 十 人 一 NO) EN + h)— NC) 
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其 中 * 兰 ”表示 同 分 布 , 即 NG) 是 平稳 增 量 过 程 . 
GDN, (z) 的 特征 函数 为 
fs (u) = Ee: ] = exp[lAit (e — 1) ] 
所 以 N (z) 的 特征 函数 为 


和 Go = |[ fs 00 = exp[( A avre — 1)] 
i=1 l 


BING) 服从 参数 为 4 = À +A te Hàn 的 Poisson 分 布 . 
由 (1)(2)(3) TANG) EIRE H A = A HA He + À, 的 齐 次 Poisson 过 程 . 
设 旅 客 按 强 度 为 的 Poisson 过 程 到 达 长 途 汽车 站 ,每 次 到 达 的 旅客 乘 A 线 的 
概率 是 pR BRKE q = 1 一 户 , 且 与 其 到 达 时 间 相 互 独立 ,不 同 的 旅客 到 达 
行为 也 是 独立 的 . 如 果 Ni(z) 表示 [0, 眉 内 乘 A 线 旅客 到 达 的 人 数 ,N;(z) 表示 [0， 
t] AR B 线 旅客 到 达 的 人 数 , 则 由 例 3.4 SON: G) t > 0) 是 强度 为 Xp 的 Poisson 
过 程 . 类 似 地 ,可 证 明 {N;, (1),t 宇 0} 是 强度 为 4(1 一 p) 的 Poisson 过 程 , 且 N, (2) #ll 
N, G) 相互 独立 . N GO) 和 N; GO 被 称 为 NG 的 分 流 . 
如 果 考 虑 乘 A 线 的 旅客 以 概率 p, 前 往 A, 线 , 则 可 进一步 把 Poisson 过 程 
(N, (O, 0) 再 进行 分 流 , 于 是 可 得 到 下 面 的 定理 : 
定理 3.3 (Poisson 过 程 的 可 分 解 性 ) NO 是 强度 为 大 的 齐 次 Poisson 过 
程 ,可 分 解 为 区 个 相互 独立 的 ， n 2,…,m 的 Poisson 过 程 ,其 


中 0 二 p; 达 1， Sm 


i=l 

证 明 上 略 . 

【 例 3.7〗 汽车 按 Poisson 过 程 驶 向 立体 交叉 桥 , 如 果 由 东 面 平均 每 分 钟 驶 入 
6 辆 汽车 ,由 南面 平均 每 分 钟 驶 入 6. 5 辆 汽车 ,由 西 面 平 均 每 分 钟 驶 入 9 辆 汽车 ,由 
北面 平均 每 分 钟 驶 入 8. 5 辆 汽车 ;在 该 桥 上 ,每 辆 车 向 左 或 向 右 转向 行驶 的 概率 都 
是 0. 30, 直 行 的 概率 是 0. 35 ,掉头 行驶 的 概率 是 0.05. 计算 各 个 方向 上 ,离开 立交 
桥 汽车 流 的 强度 . 

解 B N G) 表示 [0,t] 内 由 东 面 驶 入 的 汽车 辆 数 , 由 题 意 知 { Ni(1),t 之 0} 
是 强度 为 1 = 6( 辆 /min) 的 Poisson 过 程 ,根据 Poisson 过 程 的 可 分 解 性 ,由 东 面 
驶 入 的 车 流 分 解 到 东 、 南 、 西 、 北 四 个 方向 的 车 流 分 别 是 强度 为 0.0541 ,0.30X1， 
0. 35A, ,0. 30A; 的 Poisson 过 程 . 

可 类 似 地 列 出 其 他 方向 车 流 的 分 解 情 况 , 列 入 表 3.1 fF. 

表 3.1 车 流 分 解 情况 
方向 


句 东 向 南 分 解 向 西 分 解 向 北 分 解 
REJEA A = 6.0 .05 0.302, 0. 35A1 0.302, 








3.3 Poisson 过 程 与 指数 分 布 


63 



































续 表 3.1 
方向 向 东 分 解 向 南 分 解 向 西 分 解 向 北 分 解 
南面 驶 人 Xs = 6.5 0. 302; 0.052: 0. 302; 0.352: 
西 面 驶 入 hs = 9.0 0.352; 0. 302; 0. 052 0.302; 
北面 驶 入 X41 = 8.5 0. 302, 0. 35u 0.302, 0, 0524 
驶 出 强度 ( 辆 /min) às 一 7.95 Às = 7.80 àw = 7.05 àn = 7.20 


根据 Poisson 过 程 的 可 加 性 ,得 出 表 中 最 后 一 行 ,其 中 Xz = 7. 95 是 向 东 驶 出 立 
交 桥 的 汽车 流 强 度 ,是 Ar 所 在 列 的 各 过 程 的 强度 之 和 ;4s = 7. 80 是 向 南 驶 出 立交 
桥 的 汽车 流 强度 ,是 Xs 所 在 列 的 各 过 程 的 强度 之 和 ;MAw = 7.05 是 向 西 驶 出 立交 桥 
的 汽车 流 强度 ,是 Aw 所 在 列 的 各 过 程 的 强度 之 和 ;An = 7. 20 是 向 北 驶 出 立交 桥 的 
汽车 流 强 度 , 是 AN 所 在 列 的 各 过 程 的 强度 之 和 . 各 个 方向 上 ,离开 立交 桥 的 汽车 流 
都 是 Poisson 过 程 . 


3.3 Poisson 过 程 与 指数 分 布 


WING) = 0) Æ Poisson 过程, 令 T= 二 0,7T, 表示 第 n 个 事件 发 生 的 时 刻 或 
第 ”个 事件 发 生 的 等 待 时间 (” 辫 1),X, = T, — T, in > 1) 表示 第 n 一 1 个 事件 
与 第 nn 个 事件 发 生 的 时 间 间 隔 . 

当 Vt 宇 0,n 宇 0 时 ,下 列 事件 等 价 : 

(NO > n; = (T, < t) 
IND = n) = (T, < t< T.) = (T, < t) — {Tn <) 

因此 , 当 上 <0 时 ,Fr (1) = 0; 

当 t 宇 0 时 ,有 





La k 
Fr, (WD) = P(T, <) = PING) >n) = er Q n = 1.2, 
k=n R 


两 端 同时 对 上 求 导 可 得 也, 的 密度 函数 











十 co P 十 cc 
EE CO Qu) 
fr G) = àe 2; G — p Me 2 l] 
QD"! Ee 


— a=! 
El T, ~ T'(On,2). 
FEIE, 4 n= 1 it, A 
PIX <t} = P{T Lt} =1— e,t >20 
即 X, ~ e(a). 
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BJ X, X... X, 是 否 还 是 服从 指数 分 布 ? 现 给 出 一 个 重要 的 定理 : 
定理 3.4 (NGO. 20) } Æ Poisson 过 程 ,T。 =, T, 表示 第 个 事件 发 
生 的 时 刻 (n > 1),X, = T, 一 -hamn D. 则 X, ,X, ,--- 相互 独立 同 分 布 ,其 共 
同 分 布 是 参数 为 4 的 指数 分 布 . ， 
证 明 ”由 上 面 的 证 明 可 知 X, — e(X4), 对 Ys 二 t, 有 
PIX, >t | X =s) = P{(s,s 十 二 上 没有 事件 发 生 | X, = s) 
P{N(s+2)—N(s)=0|N(s)= 1) 
PI(IN(s+ t) — N(s) = 0) 
PING) — N(0) = 0) 
= qz A 
所 以 P{X; >t) = e”, EHA X, 与 X, 相互 独立 . 
对 于 Yn 宇 1 和 tsi,5s，"…,s,1 > 0A 
PIX; >El Xi S= sika = m aA = e 
= P((s +s sesar s Hse oe t sm 十 可 内 没有 事件 发 生 
| X, = s1 5K, = ses" X, , = Sa) 


n=l n~] 
= PIN s+) — N(27s) = 0 | N(s) = 1, 
i=1 i=] 
7 一 1 w 2 
N(s +s) — Na) 一 1 NO 一 NO215) = 1) 
i=1 i=1 


ami 光一 
= P(N(>7s +) N`) s) = 0) 
i=l i=} 


= P{ Nt) — N(0)> = 0} 
e 
从 而 有 PIX, >t} = e”, HA X Xi 都 服从 参数 为 A 的 指数 分 布 , 且 相互 


Poisson 过 程 具有 平稳 独立 增 量 性 ,其 概率 意义 是 指 从 任何 时 刻 起 ,过 程 独立 
于 之 前 发 生 的 一 切 , 且 与 原 过 程 有 完全 相同 的 分 布 ,而 具有 无 记忆 性 的 连续 型 分 布 
只 有 指数 分 布 , 所 以 时 间 间 隔 服 从 指数 分 布 是 预料 之 中 的 . 

定理 3.4 的 逆 命 题 也 是 成 立 的 ,这 又 给 定义 Poisson 过 程 带 来 了 男 一 种 方法 . 


定理 3.5 ” 若 计 数 过 程 {N(D > 0) 每 次 事件 发 生 的 时 间 间 隔 Xi Xe 
相互 独立 , 且 服 从 同一 参数 为 4 的 指数 分 布 , MNO, S> 0) 是 强度 为 4 的 
Poisson 过 程 . 


证 明 略 . 
定理 3. 5 提供 了 对 Poisson 过 程 进 行 计算 机 模拟 的 便捷 途径 . 大 家 对 均匀 分 布 
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U[0,1] 的 随机 抽样 方法 是 熟知 的 ,将 其 做 变换 后 就 可 以 模拟 参数 为 4 的 指数 随机 


变量 ,而 独立 同 分 布 的 指数 随机 变量 的 和 >, X, 就 是 T, ,也 就 是 Poisson 过 程 第 n 
个 事件 的 发 生 时 刻 , 这 样 就 可 以 模拟 参数 为 4 的 Poisson 过 程 .4 越 大 说 明 事 件 发 生 
的 平均 间隔 时 间 二 越 短 ,事件 的 发 生 就 越 频繁 ,强度 也 就 越 大 . 

【 例 3. 8〗 放射 性 物质 在 衰减 过 程 中 ,平均 每 分 钟 放射 出 4 个 7 光子, 用 NO) 
表示 在 观测 时 间 区 间 (0,1] 内 放射 出 7 光子 的 数目 , 且 {N(z),t 宇 0) 是 Poisson 过 
程 . 设计 数 器 对 检测 到 的 y 光 子 只 是 每 隔 一 个 记录 一 次 , 令 丁 是 两 个 相继 被 记录 的 
光子 之 间 的 时 间 间 隔 ( 以 min 为 单位 ), 求 工 的 概率 密度 函数 ， 

解 ”由 题 意 ,E[N(1)] 一 4 二 4, 故 {N(1),t 宇 0}) 是 参数 为 和 一 4 的 Poisson 过 程 . 

设 Zi,k 二 1,2,… 表示 第 一 1 个 与 第 个 被 记录 的 光子 之 间 的 时 间 间 隔 , 且 
从 放射 出 的 第 2 个 光子 开始 记录 ,X， 表示 放射 出 的 光子 之 间 的 时 间 间 隔 , 显 然 Z, 
= X, i Xn. 由 定理 3.4 知 ,Xisk 二 1,2,… 独立 且 同 指数 分 布 ,于 是 Zi,k = 1, 
2,"… 也 是 独立 同 分 布 的 . 所 以 只 要 求 出 Zi 的 分 布 , 即 为 工 的 分 布 . 注意 到 {Zi > t 
= {在 L0,t) 内 至 多 到 达 1 个 光子 }, 故 
P(Z >t} = PIX + X, >i) = PING) < 1) = PING) =0) 十 PINCD = 1) 

= e“ p 4te™ = (1+4D)e “> 0 
所 以 工 的 分 布 函 数 为 
SS m amiy E t>0 
Os # < 0 
lze“, £= 0 


fr (t) == F'r(t) = | 
0， r= 0 
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例 3. 5 表明 在 已 知 N(z) = 1 的 条 件 下 ,第 一 次 事件 发 生 的 时 刻 T 在 [0,t] 上 
是 均匀 分 布 的 ,因为 ,对 于 s 二 1, 有 


PIT, Ss| NŒ = 1) = P(NGs) =1|NG)=1)= 二 


这 只 是 齐 次 Poisson 过 程 与 均匀 分 布 之 间 关 系 的 一 个 特例 ,为 了 推广 这 一 结 
论 , 先 引入 顺序 统计 量 的 概念 及 其 相关 结论 . 

PCX ,XX,,…,X, DAWRA X 的 随机 样本 , 即 X, 相互 独立 , 且 与 随机 变量 Xx B. 
有 相同 的 分 布 . 其 相应 的 顺序 统计 量 记 为 
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(Xt Kt EX < X < s= £C X; 
若 X ELO, z] 上 均匀 分 布 ; 则 CXY i a ) 的 联合 概率 密度 为 
nl 
F” Gay , zz ME eq )= <<“ 
0, 其 他 
而 未 排序 的 样本 X ,X, ,…',X, ) 的 联合 概率 密度 为 


9 OS ri < rr Se SS Ey 


n 


— KNALT 
Jf (aty sp | ses pa == ATF 


0, 其 他 





证 明 对 V 0 < h < hb < == < £, < ha = tW ho = hri = 0 及 充分 小 的 
h; f Ë ti + h, < tpl < í < n, ME 
Pü, < T, Lti thl < i<n|N(0 = n) 
_ P(G t th] 中 有 一 事件 发 生 ,1 S< i < n,[0,:] 的 别处 无 事件 发 生 }) 




















PING) = n} 
PING) = n} 
h; =A ass -ih Àl hy hyh, ) 
_ (Mhi)e™: Qh;)e Ce e Al 大 
Qt)” x E 
e 
n! 


由 此 得 ,在 已 知 NO = n 的 条 件 下 ,; 4 0 < , < t, <et < t BJ, 
(T, , T; , +: , T,, ) 的 联合 分 布 密度 函数 为 
fista NG = n) = lim Pin <T Sh thol eignlNG) = n) 





iren mai 
snl 
7 
所 以 
| 
fists t, | NGO = n) = Eh A 
0, 其 他 


定理 3. 6 说 明 在 NC) 一 对 的 条 件 下 ,事件 相继 发 生 的 时 间 Tis Tast T, 的 条 
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件 分 布 函数 ,与 半 个 在 [0, 妇 上 相互 独立 且 同 服从 均匀 分 布 的 随机 变量 的 顺序 统计 
量 的 分 布 密度 函数 一 样 . 所 以 直观 上 ,在 已 知 在 [0,]j 内 发 生 了 nn 次 事件 的 条 件 下 ， 
各 次 事件 发 生 的 时 刻 Ti, Tast T, (不 排序 ) 可 看 作 是 相互 独立 的 、 服 从 [0,t] EH 
匀 分 布 的 随机 变量 . 

〖 例 3.9〗 乘客 按照 强度 为 人 的 Poisson 过 程 来 到 某 火 车 站 ,火车 在 时 刻 上 离开 
车 站 ,计算 在 [0,t] 内 到 达 车 站 的 顾客 等 待 时 间 总 和 的 期 望 值 . 

解 ” 设 第 i 个 乘客 到 达 火 车 站 的 时 刻 为 T;, 他 的 等 待 时 间 为 1 一 T;, 在 [0,t] 内 
总 共 来 了 NO) 位 乘客 , 则 [0,t] 内 到 达 车 站 的 顾客 等 待 时 间 总 和 为 


NGD) 


SG = > G- T;) 
i=1 
因为 


NCU) 


E[S(2) |NGD = n] = EL >G — T.) | NG) = n] 
i=] 


= E[2)G — TO| NO = n] =m -ELI T| NWO = n] 
i=1 isi 


| 
š 
Sp 
> 
iM: 
S 
> 


2 
JR PU,I,U,,-.. U, 为 [0,t] 上 独立 且 同 均匀 分 分 布 的 随机 变量 ,U < U, < … 
U 为 其 顺序 统计 量 . 故 


ELS] = E(E[S(O | NJ} = ELNO] = =A 


从 


【 例 3.10] 设 一 部 仪器 在 [0,z] 内 受 冲击 的 次 数 {N(1) > 0) À 的 
齐 次 Poisson 过 程 . 第 i 次 冲击 造成 的 损失 为 也 ;, 假 定 D,,i 宇 1 独立 同 pes 与 
(NGO ,二 0} 独立 ,冲击 引起 的 损失 随时 间 按 负 指 数 衰 减 , 即 上 一 0 的 衰减 为 万 ,多 
BJ Z| ¿di & 22 De “ (a > AR). 设 损失 是 可 加 的 ,那么 22 041682 3 Den 
= = ED O APT, 为 第 i 3k 58] Aa ARR ELDO]. 

解 由 于 


ELDO |NO = n] = E| X De | NG) = n] 
i=1 


= E| YD ee ta | NGC) = n] 
i=l 
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= > E[D,e “T | NG) = n] 
i=1 

= >1E[D,|N(t = nJE[e “T | NG) = n] 
i=l 


= E(D) + e~” 六 Er[er ING = n] 
记 Ui,Us，,…,U, 为 [0, 二 上 独立 且 同 均匀 分 布 的 随机 变量 , 则 有 
SVELE. [ING) = n] = EL > eto] == E[ le] 

ss sess k=1 


= "| e” Laz 
0 t 
= (e —1) 
at 
所 以 有 
ELX | NÆ) = n] = =Q 一 e“)ECD) 
即 有 
ELX |N] = Noa — e )E(D) 
Qi 
故 


E[XG)] = E(E[XG() |NG)]) = 


WD a y 
Q 


【 例 33.11] 假设 参数 为 A 的 Poisson 过 程 的 各 个 事件 被 分 为 1 类 或 2 类 ,具体 地 
说 ,如 果菜 一 事件 在 时 刻 发 生 以 概率 P(s) 归 为 1 类 ,以 概率 1 一 P(s) 归 为 2 类 , 且 与 
其 他 事件 归 为 哪 一 类 相互 独立 . 若 N, GO 表示 到 时 刻 i,i 类 事件 发 生 的 件数 ,i 二 1,2， 
MJ Ni Ga 与 Nz(i) 是 独立 的 ,均值 分 别 为 p AA — p) 的 泊 松 随机 变量 ,其 中 


b= LF Pods 


证 明 由 全 概率 公式 得 
PIN, (t) = n, N, (t) == m) 


+œ 


= D P(N = n,N,G) = m | NO) = k} P{ NG) = b) 
k=0 


= PIN, Œ) = n,N, G) = m| NO = m+n PINGO) = m+ n) 
考虑 在 L0,t] 上 发 生 的 任 一 事件 ,如 果 它 在 时 刻 发 生 , 则 它 是 1 类 事件 的 概率 
为 P(s). 而 由 定理 3.6 知 , 此 事件 发 生 的 时 刻 在 (0,z) 上 均匀 分 布 ,所 以 它 是 1 类 事 
件 的 概率 为 


b= Lf Peas 
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且 与 其 他 事件 是 哪 一 类 相互 独立 . 
因此 ,PIN 人) =n, N) = m| NG = m+ n TÆR m+n 次 Bernouli 试 
验 中 nn 次 成 功 ,m 次 失败 的 概率 ,而 每 次 试验 成 功 的 概率 是 p, Ep 


m +n 
PUN, G5 = n, N; (Ü) = m |) NÇ =m nk = [ rasp 
n 








从 而 
PIN, G = n, N, t) = m) 

= P(N) =n,N,G) =m | N) = m+ xn) PING = m +n) 

pen m Eg it n m (àt yera _ 

= [ n ) 1 Ce 十 亲人 

= tp)" np Lu GQ — p) ]” wap 

n! m! 
所 以 
PING) = n) = — a 


P{N: (t) = m) = wa — P) ]” wow 


m! 





且 N,G 与 N) 相互 独立 . 

【 例 3.12] (M/G/œ 排队 系统 )M/G/co 表示 一 个 随机 服务 系统 ,其 中 M 表 
示 顾 客 到 达 服 务 台 的 过 程 是 参数 为 4 的 Poisson 过 程 ;G 表示 每 个 顾客 到 达 后 的 服 
务 时 间 了 是 独立 同 分 布 的 随机 变量 ,其 分 布 函 数 为 G(1);co 表示 服务 人 员 的 人 数 
是 无 穷 多 的 , 即 顾 客 到 达 服 务 台 后 立即 接受 服务 而 无 须 等 待 . 现在 考虑 这 一 随机 服 
务 系统 的 效率 ,也 就 是 计算 到 时 刻 上 已 经 服务 完 的 顾客 数 与 未 服务 完 的 顾客 数 的 联 
DDH. 

E 称 某 一 顾客 为 1 类 的 ,如 果 到 时 刻 上 他 已 经 服务 完 ; 称 某 一 顾客 是 2 类 的 ， 
如 果 到 时 刻 上 他 尚未 服务 完毕 . N. G) 表示 到 时 刻 1,i 类 顾客 的 人 数 ,i 二 1,2. 

d RMATA sC) 到 达 , 那 么 当 他 的 服务 时 间 Y 了 二 1 一 s 时 ,他 是 1 类 的 ， 
而 服务 时 间 的 分 布 是 G, 因 此 属于 1 类 的 概率 为 

p(s) = G(t — s) 

于 是 ,Ni G) 的 分 布 是 均值 为 


EN: (D ] = xp = 4| Ga- sds = a| Gody 
0 0 


的 Poisson ++. 
类 似 地 ，Na (1) 的 分 布 是 均值 为 


E[N; G) ] = 2(1— p) = af [1 —G(y)]dy 
的 Poisson 分 布 , 且 NG) 5 N, (2) 是 相互 独立 的 . 
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3.5 Poisson 过 程 的 推广 


在 前 几 节 讨 论 中 ,可 以 看 到 Poisson 过 程 有 许多 独特 的 性 质 ,这 与 它 的 定义 中 
加 了 许多 严格 限制 有 关 , 而 在 许多 实际 问题 中 并 不 都 满足 这 些 条 件 , 因 此 有 必要 将 
定义 中 的 某 些 条 件 放宽 ,将 其 推广 到 其 他 情形 . 


3.5.1 非 齐 次 Poisson 过 程 


当 Poisson 过 程 的 强度 4 不 再 是 常数 ,而 与 时 间 t 有 关 时 ,Poisson 过 程 被 推广 
成 为 非 齐 次 ( 非 时 齐 )Poisson 过 程 .在 实际 中 , 非 齐 次 Poisson 过 程 也 是 比较 常用 
的 . 例如 在 考虑 设备 故障 率 时 ,由 于 设备 使 用 年 限 的 变化 ,出 故障 的 可 能 性 会 随 之 
变化 ;放射 性 物质 的 衰变 速率 ,会 因 各 种 外 部 条 件 的 变化 而 随 之 变化 ;昆虫 产 卵 的 
TOORE TEN O E 等 等 . 


称 为 强度 函数 





非 齐 次 Poisson 过 程 的 重要 性 在 于 不 再 要 求 平 稳 增 量 性 ,从 而 允许 事件 在 某 个 
时 刻 发 生 的 可 能 性 大 于 另 一 个 时 刻 发 生 的 可 能 性 . 

HIRE AG) 三 4, 则 非 齐 次 Poisson 过 程 即 为 齐 次 Poisson 过 程 . 下 面 的 定理 给 
出 了 两 者 之 间 的 转换 关系 .事实 上 , 非 齐 次 Poisson 过 程 不 过 是 “ 换 了 一 个 时 钟 来 计 
时 ”的 齐 次 Poisson 过 程 . 
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s. 55 a 5 
Poisson 过 程 , 记 M(u) = e WMC 


Poisson 过 程 







Www、 

证 明 

(1) 只 要 证 明 {M(w) ,zx 人 0) 满足 :对 任意 4 > 0 和 充分 小 的 Au 之 0, 有 
(M(u + Au) — M(u) = 1} = Au + o( Au) 
PIM(u + Au) — M(u) > 2) = o( Au) 








由 于 强度 函数 4(1) 二 0,t 宇 0, 而 m(1) = 2G)ds, 所 以 mC 二 0 上 且 单 调 递 增 ， 
因此 , 反 函 数 m G) 存在 且 单调 递增 . 设 上 = m Cu), t+ At = m (u + Au), II 


tHAt 
Au = m(t + At) — m(t) =f A (s)ds 





= A (t)At +0 (At) 
TÆ 





P (M(u+ Au) — M(u) = 1} 

Au—0+ Au 

P IN[m (ut Au) ] —N[m '(u)] = 1} 
Ar 04- AGO At o(At) 
P(NG + A) — NG) = 1) 

Ar—=0+ A(1)At ol(At) 


p AWAt tolt) _ 
Pm a olan | 














Bp 


P{M(u + Au) — M(u) 1} = Au + o(Au) 


同 理 可 得 
PI IM(u + Au) — M(u) > 2) = o(Au) 

所 以 {M(w) u Z 0) 是 强度 参数 为 1 的 时 齐 Poisson 过 程 . 

(2) 证 略 . 

【 例 3. 13〗 设 某 设 备 的 使 用 期 限 为 10 年 ,在 前 5 年 内 平均 2.5 年 需要 维修 一 
次 ,后 5 年 平均 2 年 需要 维修 一 次 . 试 求 它 在 使 用 期 限 内 只 维修 过 一 次 的 概率 . 

E N(z) 表示 (0,t] 内 该 设备 维修 的 次 数 ,可 以 用 非 齐 次 Poisson 过 寺 程 来 描述 
该 过 程 , 其 强度 函数 为 
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1/25; OKAS 


A(z) = | 
1/2, E £ =< T@ 


10 5 1 10 1 _ 
m(10) = f A(t)di = | sa + | zË = 4.5 

故 在 使 用 期 限 内 只 维修 过 一 次 的 概率 为 
一 4.5 (4.5) — 9 b 


P{N(10)— N(0)= 1) =e i 73e 


[53.14] 从 历史 观测 可 以 发 现 , 平 日 上 午 5:00 一 11:00 到 某 个 加 油 站 加 
油 的 汽车 数量 可 以 用 非 齐 次 Poisson 过 程 {N(1),t 宇 0}) 来 模拟 ,并 且 具 有 以 下 强 
AG) = 10 +35. 40 — 5)e m/s,5<t<1ll 
问 : 
d) 在 某 个 工作 日 上 午 5:00 一 11:00 来 加 油 的 汽车 数量 的 均值 是 多 少 ? 
(2) 至 少 有 90 辆 车 在 某 个 工作 日 的 6:00 一 8:00 来 加 油 的 概率 是 多 少 ? 
解 d) 上 午 5:00 一 11:00 来 加 油 的 汽车 数量 的 均值 为 


11 6 3 
ELN(5,11)] = | ACt) dz =| (10 + 35. 4te™’/s Jdt 


= [10t 一 141.6e “° J$ = 200 
(2) 在 6:00 一 8:00 到 达 车 辆 的 均值 为 


8 3 2 
| A(1t) dt = | (10 +35. 4te™ 2 )dt 
6 1 


= [10 — 141. 6e% ]} = 99 
H, £ 6: 00 — 8: 00 #J ik 66 E N(6,8) = N(8) — N(6) 具有 参数 为 99 
的 Poisson 分 布 , 即 


S. 99" 
P{N(6,8) — 90} = ee"” 
n=90 "> 
通过 Poisson 分 布 的 正 态 近似 ,得 到 
s 99" 0.99 90 一 99 


Al ~1— @[ J 


)= 1 一 0.1827 = 0. 8173 


n=90 


因此 ,P{N(6,8) > 90) = 0. 8173. 

[0] 3.15] 某 小 商店 上 午 8 时 开始 营业 ,从 8 时 到 11 时 平均 顾客 到 达 率 呈 线 
性 增加 ;从 8 时 开始 顾客 到 达 率 为 5 人 /h,11 时 到 达 率 达到 高 峰 , 为 20 人 /hi; 从 11 
时 至 下 午 1 时 到 达 率 不 变 ;从 下 午 1 时 至 5 时 顾客 到 达 率 呈 线 性 下 降 , 到 下 午 5 时 
顾客 到 达 率 为 12 人 /h. 设 在 不 相 重 司 的 时 间 间 隔 内 到 达 的 顾客 数 是 相互 独立 
的 . 试 求 在 上 午 8 时 半 至 9 时 半 无 顾客 到 达 的 概率 和 该 段 时 间 内 到 达 顾 客 数 的 数 
学 期 望 . 
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解 “因为 顾客 到 达 率 与 时 间 有 关 ，, 所 以 顾客 到 达 过 程 是 一 个 非 齐 次 Foisson 
过 程 . 

设 上 午 8 时 为 一 0, 则 上 午 11 时 为 上 一 3, 下 午 1 时 为 上 一 5, 下 午 5 时 为 t = 8, 
次 日 8 时 从 上 一 0 重新 开始 , 故 可 得 一 周期 为 9 的 曲线 . 按 曲线 写 出 顾客 到 达 举 和 (7) 
的 关系 式 如 下 : 


5 Its 0 2 = a 
AG) -| 20, 3<t:<5; BAG 一 和 G 十 9) 
20 一 2 人 一 5)， 5<Ł:<9 


因为 


"Pe [tpn 


所 以 在 上 午 8 时 半 至 9 时 半 无 顾客 到 达 的 概率 为 er"32 80/51 — e ,在 上 午 8 时 
半 至 9 时 半 的 时 间 内 到 达 顾 客 数 的 数学 期 望 为 m(3/2)—m(1/2) = 10( 人 ). 


3.5.2 复合 Poisson 过 程 


人 们 在 考虑 设备 故障 所 需 的 维修 费 , 自 然 灾 害 所 造成 的 损失 ,股票 市 场 的 价格 
变动 时 ,都 会 碰 到 这 样 一 类 模型 :事件 的 发 生 服从 Poisson 过 程 ,而 每 一 次 事件 都 还 
附带 一 个 随机 变量 (如 费用 、 损 失 等 ). 此 时 人 们 感 兴趣 的 不 仅仅 是 事件 发 生 的 次 
数 , 还 需要 了 解 总 费用 或 总 损失 等 . 这 时 就 需要 用 复合 Poisson 过 程 来 描述 这 一 


设 { D> >1) 是 独立 同 分 布 的 随机 : 
Poisson Ce = o 与 (Yi > 1) 独立 ， 







量 序列 ,{(NC) ,i 之 0) 为 





MKAO» t = 0} ) 为 复合 Poisson Be. 


ENGA) 表示 [0,tj 内 到 达 的 粒子 数 ,Y， 表示 第 个 粒子 的 能 量 , 则 XG) 表示 
[0, 妇 内 到 达 的 粒子 的 总 能 量 ; 若 {N(7) ,t 宇 0) 表示 顾客 流 ,Y; 表示 第 i 个 顾客 的 行 
李 重 量 , 则 X(z) RRO] 内 到 达 的 顾客 的 行李 总 重量 ; 若 在 某 保险 公司 买 了 人 寿 
保险 的 人 在 时 刻 到 1 Wr Wrote 死亡 ,在 时 刻 W, 死亡 的 人 的 保险 金额 是 Y, ,在 


[0, 和 内 死亡 的 人 数 为 NOD , 则 XO = YY, 表示 该 公司 在 [0, 相 内 需要 支付 的 赔 
偿 金 总 额 

容易 看 出 ， 复合 Poisson 过 程 不 一 定 是 计数 过 程 ,但 当 Y; = cpi 二 1,2,…,c 为 
常数 时 ,可 转化 为 Poisson 过 程 . 对 于 复合 Poisson 过 程 ,通常 关心 的 是 它 的 一 些 数 
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字 特 征 
定理 3.9 (XO) = 多 Y ,之 0) 是 复合 Poisson 过 程 ,(N() >0) E 





强度 为 的 Poisson 过 程 , 则 ， 
0 
证 明 (1) £ 0 < ,, < t, Lee < t, M 


NC) 


X Ctr) — X Ct) = > Y.,, k = 1,2,, s= Nn 


i=N(t,_) )+1 


H Poisson 过 程 的 独立 增 量 性 和 Y, Z E BJ gh sy FE n] SIL X (ti) 的 独立 增 量 性 . 


(2) l te | 
pxo (u) = 下 [ex ] = DELle*® | NÆ) = n]P(N() = n) 


n=0 


十 ee 

= J Ee Yr | NG) = n] a e 
n=0 n! 
+œ 

= uY +Y, + ty, ) CGAL s 
2, Ele ] "AF e 


= D pernp We 
n=0 n! 
SY: — Y WER RKRO gyu) = Ee”), WA 
pxo (u) = E[ex J = > Lu T o = exp{At [py G) —11) 
n=0 ° 


对 上 式 在 = 0 处 求 导数 ,有 
ELX] = g'xa (0) = XE(Y') 
以 及 
D[ XG) ] = XE(Y?) 

〖 例 3.16] 上 海 证 券 交 易 所 ,宝钢 股份 的 交易 流 是 强度 为 A( 笔 /min) 的 
Poisson 过 程 . £ # j 笔 交 易 量 是 2Z; 手 ,如 果 (2;}) 是 来 自 总 体 Z 的 随机 变量 , 且 一 
EE(Z),o? = Var(2Z). 计 算 宝 钢 股 份 60 min 内 的 交易 量 的 数学 期 望 和 标准 差 . 

解 用 {NGD),t 福 0)} 表 示 上 述 的 强度 为 人 的 Poisson 过 程 .60 min 的 交易 量 为 


N(60) 


X(60) = 2 Zi ,根据 定理 3.9 知 ,60 min 的 平均 交易 量 为 


ELX(60)] = 602 (+) 
交易 量 的 标准 差 为 
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VVar[X(60)] = V604(y F) = VOE ZO (F) 
[B] 3.17] 保险 公司 接 到 的 索赔 次 数 服从 强度 为 每 月 2 次 的 Poisson 过 程 
{N(CiD) ,1 0) ,每 次 要 求 赔偿 的 金额 Yi 相互 独立 同 分 布 , 服 从 均值 为 10000 的 正 态 
分 布 , 则 一 年 中 保险 公司 平均 的 赔付 额 是 多 少 ? 


解 ”在 [0,1] 内 保险 公司 需要 赔付 的 总 金额 {X(1) = >Y r >0) 是 一 个 复 

合 Poisson 过 程 ,所 以 一 年 中 保险 公司 平均 的 赔付 额 为 
E[ X(12) ] = 2 X 12 X 10000 = 240000 

【 例 33.18] 设 移民 到 某 地 定居 的 户 数 是 Poisson 过 程 , 平 均 每 周 有 2 PRA. 
设 每 户 的 人 口 数 是 一 随机 变量 ,一 户 有 4 人 的 概率 是 1/6, 有 3 人 的 概率 是 1/3, 有 2 
人 的 概率 是 1/3, 有 1 人 的 概率 是 1/6. 求 在 五 周 内 到 该 地 定居 的 移民 人 数 的 数学 期 
望 和 方差 . 

解 ” 以 Y; 记 第 i 户 人 口 数 ,N(1) 表示 (0,t] 内 到 该 地 定居 的 户 数 , 则 移民 总 人 


NiD) 


数 XX(1) = 》)Y, 是 一 复合 Poisson 过 程 . 
i=1 





EY) =4X43X4+2X++1X+ =Š 
2 ; 2 1 1 n 1 43 
EY J] = 4° X — * x< — = 2 se =. — 25 
Sg XP 8 X q 2 X a r ; 
43 _ 215 


所 以 E[X(5)] = 2 x 5 X u kos x Š = 235. 


3.5.3 条件 Poisson 过 程 


Poisson 过 程 描述 的 是 一 个 有 着 “风险 ”参数 和 的 个 体 发 生菜 一 事件 的 概率 . 如 
果 考 虑 一 个 总 体 , 其 中 的 个 体 存 在 差异 ,比如 发 生 事故 的 倾向 性 因 人 而 异 , 这 时 可 
以 把 定义 3.2 中 的 概率 分 布 解释 为 给 定时 ,N(t) 的 条 件 分 布 . 
定义 3.6” 设 A 是 一 正 的 随机 变量 ,分 布 函 数 为 G(z),zx 宇 0, 设 {N(4) ,全 
0) 是 一 计数 过 程 , 若 在 给 定 条 件 A 二 4 下 ;{N(z),t > 0) 是 一 Poisson 过 程 , 即 
Ys;t 宇 0,nE€ Ns,A 宇 0; 有 





PING T NG pA = A. OO" 
WIRING) st > 0) 是 条 件 Poisson IFE, IP 38 (N, (O r 220). 
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t, E ECA eo, N 


证 明 


(ye~ 


P{N(s+t)— N(s)= n| A = À) = = 





则 





十 ca 
P(NG + D) — N(ə) = n) = | PIN(s+z)— N(s)= n | A= A)dG(A) 
0 
| = WVGA) 
0 nl 


(2) 由 期 望 的 全 概率 公式 得 
十 cc += 
E[N, (t) ]= | ELN(1)| A= 4]dG()= f àtdG(A)= tE (4) 


十 co 
(3) E[N, =f E[N G° | A= A JdG (Q) 
0 


= j. TA)? +A JdGO = PECA JHE (A) 
下 了 条 件 Poisson 和 Em. 





证 明 
(1) RIZO = to < th < ** < t, n= 1,2,…, 那 么 ,对 于 任何 非 负 整数 i i. 
in A 
PIN, Ga 十 st +r) = ip; k = 1,2,.… ,7) 


Hoo 
kasa f P{ N, (te +t ti FT) — ¿Ë = 1,2,.…,n}dG(A) 


too 
= | Pi Ni Chy-1 b) = i ;k = 1,2, ,n) dG(A) 


= P (N.A (t, stk) = ¿|Ë = Ly2s th, 
(2) 假设 0 < t < t, < t, HA 


J 题 3 TT 








= 


[s 


— 


gi 


D 


~ 


Oo 


P{Ni (t,ts) ¿a NA (t sby) — Z) 


e 
af P{ N, (Ct sta) = iis N, (t; A) i dG (À) 


z | PIN, (hn) = AIPIN, Goh) = k Y4G0) 
al PIN, (ist) = ipae | PIN, tasts) = iz} dG) 


0 


= PUNA Ch st) = ar P(N, Ot yt3 ) = iz} 


J A 3 


.在 某 地 的 灾难 性 车 祸 可 以 用 强度 为 和 一 3( 次 /年 ) 的 齐 次 Poisson 过 程 描述 , 则 


在 最 近 一 年 的 下 半年 至 少 有 2 次 灾难 性 车 祸 发 生 的 概率 是 多 少 ? 


. {N(1),t 宇 0} 是 强度 为 A 的 齐 次 Poisson 过 程 , 证 明 :其 协 方差 函数 Cx(s,t) = 
Amin(s,t). 
.每 天 12:00 一 14:00 通 过 某 十 字 路 口 的 车 辆 ,服从 强度 为 和 一 40( 辆 /h) 的 齐 


次 Poisson 过 程 ,其 中 有 0.8% 的 车 辆 会 忽视 指示 牌 “ 停 ”. 问 在 12 : 00 — 13 : 00 
间 至 少 有 一 辆 汽车 忽视 指示 牌 的 概率 是 多 大 ? 


. 设 {N(1),t 三 0) 是 一 个 强度 为 A 的 齐 次 Poisson 过 程 , 对 于 一 个 任意 固定 的 正 数 


有 , 令 义 (1) 二 N(t 十 及 ) 一 N(4), 证 明 : 随 机 过 程 {X(t),t 宇 0) 是 弱 平 稳 的 . 


.大 量 样本 的 统计 评价 模型 证 明 ,每 天 12:00 一 16:00 之 间 到 达 某 汽车 加 油 站 的 


汽车 数量 {NN(1),t 这 0}) 为 非 齐 次 Poisson 过 程 , 强 度 为 
A(t)= 8—4:+ 32 ,0 < t < 4 

求 : 

(1) 在 12:00 一 16:00 之 间 平 均 有 多 少 辆 汽车 到 达 加 油 站 ? 

(2) 在 12:00 一 16:00 之 间 至 少 有 40 辆 汽车 达到 的 概率 . 


. 设 {N(1),t 宇 0) X Poisson 过 程 ,参数 为 4, 求 或 证 明 : 


(1) EIN(ONG +i}; 

(2)ELN(1 十 s) | N(s)]] 的 分 布 律 ; 

(3) £#2£-Q0<s=< ¿, # PING) 过 NGD) = 1; 

(4) #2 0 < s<, e > 0, #limP (NG) — N(s) > e) = 0. 


RING) ,之 0) 是 具有 参数 为 和 的 Poisson 过 程 ,假定 开 是 相 邻 事件 的 时 间 间 隔 ， 


证 明 : 
PIT 5i tb | T> 8) = P{T > s) 


HNO 和 N, G) 是 强度 分 别 为 A1 和 Xs 上 且 相互 独立 的 Possion 过 程 . 证明: 在 


Ni (z) 的 任意 两 个 相 邻 事件 之 间 的 时 间 间 隔 内 ,Naz(i) 恰好 有 个 事件 发 生 的 概 
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_ i Àz $ 
P Fe (z FR) 
9. X,Y Yose Æ — #| A E Ak sr y R #JL F En ARAA 29 À 的 Poisson 分 
A Yi ,Y,, = 服从 [0,1] 上 的 均匀 分 布 ,定义 
x 
NG) = Irog (Y,) st E€ [0,1] 


其 中 Loa) 表示 [0, 熙 上 的 示 性 函数 ,证 明 :;{N(D,tE [0,1]) 是 参数 为 A 的 
Poisson 过 程 ， 

10. 在 一 个 二 手 车 经 销 商店 ,到 达 的 特定 类 型 的 汽车 数量 {N(i),t 之 0} 服 从 强度 
为 A 的 齐 次 Poisson t$ ë. i& T, ,i = 1,2,--- 是 该 类 型 车 第 i 辆 的 到 达 时 间 , 在 TT 
时 刻 到 达 的 汽车 马上 就 会 被 经 销 商 以 价格 C, 转 售 ,Ci ,C;，… 相互 独立 且 同 分 
布 . 但 是 如 果 买 家 在 T, 十 + 时 刻 买 在 T, 时 刻 到 达 的 车 ,他 只 需要 付 e“C, ,其 中 
a 之 0. 在 1 时 刻 ,经 销 商 同时 出 售 所 有 类 型 的 汽车 求 汽车 经 销 商 出 售 汽车 总 价 
格 的 平均 值 

11. {N(1),t 宇 0} 是 强度 函数 为 4(1) 的 非 齐 次 Poisson 过 程 ,均值 函数 A(1) = 
| aczydz, 记 第 ;次 事件 发 生 的 时 刻 为 了 ,， 证 明 : £ NG) = n 的 条 件 下 ,随机 向 
ECT ,Ts,…,T,) 与 n 个 独立 同 分 布 ,分 布 函 数 为 


ACz) 
OKríi 
re -| 





AG) ` 
l; £# > 
的 随机 变量 的 顺序 统计 量 的 分 布 相同 . 
12. 设 {N(1),t 宇 0} 是 一 个 强度 为 A 的 齐 次 Poisson 过 程 , 令 下 一 1,2.… 是 第 :; 
次 事件 发 生 的 时 刻 ,确定 过 程 {(X(1),t 宇 0)， 


N <t> 


Hs 0 = < 
x= >)hG— T), pho = |” Ë 
i=1 


0， 其 他 





的 协 方差 函数 Cx (z). 


PAF 马尔 可 大 链 


41 马尔 可 夫 过 程 的 概念 


马尔 可 夫 (Markov) 过 程 主要 应 用 于 排队 论 、 存 储 模 型 和 更 新 模型 方面 ,也 广 
泛 应 用 于 网 络 流 量 分 析 和 计算 机 系统 建 模 等 方面 . 特别 是 近期 Markov 过 程 的 计算 
机 仿真 算法 理论 的 快速 发 展 ,使 得 Markov 过 程 的 应 用 取得 了 许多 革新 成 果 . 


定义 4.1 如 果 对 于 了 中 任意 有 限 个 点 所 Shear "< URE FERA 
zG = 1,2, n), 和 已 中 的 任意 波 雷 尔 (Borel) 集 4， 都 有 
PIXGNI E A| X) 之 | "XC -n "XG, x =, X0 = = a 
= PIXO EAX ` x -o 
则 称 随机 过 程 {X(D) ,t € T) X Markov Ë ee Markov tE. 
上 述 术 结 论 也 可 写成 
PKC) < =, | XA)= ti X(t) = trsy X (tr) = z, 1) 
= P X(t) =< z, |X Ctra) = 2, 4) L x=, € R 
Re (maaf, | oa sapa = Fe p. (za ñ | she) 
或 f, lana, C. t. | zirT te tti) = fa Je (z st, |z, tea) 

SRE T = (0, +œ) 3 T = (0,1,2,…) = Nt ,状态 空间 EE= R sÉ R HH 

波 雷 尔 集 . 

由 定义 4.1 可 知 ,Markov 过 程 具有 Markov 性 或 无 后 效 性 , 即 在 过 程 或 系统 在 
时 刻 to 所 处 的 状态 为 已 知 的 条 件 下 ,过 程 在 时 刻 ¿G 之 与) 所 处 的 状态 的 条 件 分 布 
与 过 程 在 时 刻 o 之 前 所 处 的 状态 无 关 . 也 就 是 说 ,在 已 知 过 程 的 “现在 ”的 条 件 下 ， 
过 程 的 “将 来 ”与 过 程 的 “过 去 ”无 关 , 只 与 “现在 ”有 关 . 

【 例 4.1】 (XG), ET) 是 一 独立 随机 过 程 , 即 对 于 nn 个 t,ts,*…,t, ET, 
X) X), XG) 总 体 独立 ,证 明 : {XX(1),t € T) 是 一 马尔 可 夫 过 程 

证 明 由 已 知 条 件 知 ,随机 事件 

X) = zi X) = z," XG.) = z XG) 之 xz 也 相互 独立 于 是 

P (XG) < z | XD = z, Rb) = trs X ta) = z,) = PIX) = =) 
P+ XG) = m | XG) = z, = PIXOS x) 
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从 而 P{X() < z | XG) = zi, Xt) = ras X(t) = xr) 
= P(XG:) < < | X(z,) = <x,) 

由 定义 4.132. XG). € T) 是 马尔 可 夫 过 程 . 

同 理 也 可 以 证 明 独 立 随机 序列 的 和 、 常 用 的 泊 松 过 程 以 及 维 纳 (Wiener) 过 程 
等 也 都 是 马尔 可 夫 过 程 . 

Markov 过 程 按 其 状态 和 时 间 参 数 是 连续 的 或 离散 的 ,可 以 分 为 如 下 四 类 : 

(1) 时 间 参 数 离散 ,状态 空间 离散 的 过 程 , 称 为 马尔 可 夫 链 ,简称 马 氏 链 . 

(2) 时 间 参 数 连续 .状态 空间 离散 的 过 程 , 称 为 纯 不 连续 Markov 过 程 或 可 数 
状态 的 Markov 过 程 . 

(3) 时 间 参 数 离散 .状态 空间 连续 的 过 程 , 称 为 Markov 序列 . 

(4) 时 间 参 数 连续 状态 空间 连续 的 过 程 , 称 为 连续 马尔 可 夫 过 程 或 扩散 过 程 . 

由 于 课时 数 的 限制 ,本 章 将 主要 介绍 Markov 链 的 一 些 基 础 理论 知识 及 其 在 相 
关 领 域内 的 某 些 应 用 . 





4.2 马尔 可 夫 链 的 概念 


4.2.1 马尔 可 夫 链 的 定义 


设 马尔 可 夫 过 程 {(X, ;n € T) 的 参数 集 工 是 离散 的 时 间 集 合 , 即 工 二 {0,1,2， 
…} ,其 相应 X, 可 能 取 值 的 全 体 组 成 的 状态 空间 是 离散 的 状态 集 工 二 人， 


o 2 设 随机 序列 {X, ;n 之 0) 的 状态 空间 为 了 ,如 果 对 Yn E Ni, 
o rrin sina € 1, PIX = S i X. 二 > O, 有 
D „=i imna a =. i X= a E F h) Fa e Z fia X = in) 


(4.1) 





WRX. n 2 0) 5 Markov $. 


可 以 看 出 , 式 (4， 1) 有 效 地 刻画 了 Markov 链 的 特性 ， 称 此 特性 为 Markov 性 或 
无 后 效 性 ,简称 为 马 氏 性 . 简 言 之 , 即 已 知 “ 现 在 ”,“ 将 来 ”与 “过 去 ”无 关 . Markov 
链 也 称 为 马 氏 链 . 

由 定义 4.2 知 

PIX, S io Xi = i Xn = i? 
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IK, = | X, 三 而 ?而 = Duss NX. t = heal X 
P4X, = igs Ny = ipts Aa = š. 1 
IX, =s, | Xi = L I) X PIX; = iç +N, = his NX, = 1,14) 
IX; = ¿| X: = ña, X PIN, a = a | Ñas = ša) X == 5 
PIX, =à |X = i) X PIX, = h). 
可 见 , 如 果 马 尔 可 夫 链 的 初始 分 布 P IX, = io} 确定 ,其 统计 性 质 完全 由 条 件 
概率 PIX, S ¿a | X, = i) 决定 .如 何 确定 这 个 条 件 概 率 , 是 马尔 可 夫 链 理论 与 
应 用 研究 中 的 重要 问题 之 一 . 





4.2.2 转移 概率 


X43 RX. n> 0) ABRE ASEN J 
: x — s K 云 i x x 
ABREX n> 0) 在 NUN- SRBRR HINRERE 
显然 ,一 步 转移 概率 满足 ， 
Bima, ijel 


X pin) J; E T 


一 般 地 ,转移 概率 p; (n) 不 仅 与 状态 i,; 有 关 , 而 且 与 时 刻 n 有 关 . 4 pyn) 不 
依赖 于 时 刻 n 时 ,表示 马尔 可 夫 链 具有 平稳 转移 概率 . 

若 对 于 Vi, € 1, 有 

P{X = ;| X, = i) = p, m) = p; 

即 上 面 式 子 的 右边 与 时 刻 n 无关 , 则 称 此 马 氏 链 为 齐 次 (或 时 齐 的 ) 马 氏 链 . 

如 果 没 有 特别 说 明 , 下 面 只 讨论 齐 次 马尔 可 夫 链 ,通常 将 “ 齐 次 ”两 字 省 略 . 

设 po(i) = P(X, = i),i € 了 ,如果 对 一 切 i€ IT 都 有 po(i) 宇 0, Xp) = 

i€ 1 


1 , 则 称 pD 为 马 氏 链 的 初始 分 布 . 记 
Ai (n) = P IX, = i), a(n) = mn) ,nan) ,Ai(n),) 

an) 表示 n 时 刻 X, 的 概率 分 布 向 量 . 称 {x;(n) € I) 为 Markov 链 的 绝对 分 布 ; 
(Xi(0),i € I} 为 Markov 链 的 初始 分 布 . 

若 绝 对 分 布 z (n) 与 n 无 关 , 即 

m:n) = P{X, = i}= ni € I,n > 0 

则 称 {zi,i € 1) 为 马 氏 链 {X,;n 宇 0) 的 定 态 分 布 . 

对 于 齐 次 马 氏 链 , 记 了 = (pi), HRES I = 代 ,2,…), 则 称 和 矩阵 P 了 为 马 氏 
链 的 一 步 转移 概率 和 矩阵 ,简称 为 转移 矩阵 . 
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它 具有 以 下 性 质 : 
(Dps 0,ij € I; 
(DD py = lsi € I. 
j€l 
通常 满足 上 述 性 质 (1) 和 (2) 的 矩阵 , 称 为 随机 矩阵. 
一 个 Markov 链 的 特性 完全 由 它 的 一 步 转移 概率 抢 阵 忆 及 初始 分 布 向 量 
{xi(0) ,i E DRE. 

o 定理 《41 — 2 il zGP C S aU 
Dm (4. 3) 
证 明 ” 先 对 事件 进行 分 解 

(Xm =j)=U (X, = iX =) 
因为 当 i 关 k 时 ,{X, =i) N (X, = k)= 多, 故 
PIX, = j)j= > PIX, = bX, = 


= Ņ P(X, = PIX. I = j| X, = = 2yr: py 
写成 向 量 形式 即 得 
m(n + 1) = xP 
重复 利用 式 (4. 2) 即 得 式 (4. 3). 
如 果 状 态 空间 是 有 限 的 , 设 状 态 数 为 2%, 则 一 步 转移 概率 矩阵 是 ” 阶 方 阵 ; 若 状 
态 是 无 限 可 列 的 情形 , 则 一 步 转移 概率 矩阵 只 是 形式 上 的 矩阵 . 
【 例 4.2〗 设 {Yi,k 宇 1) 是 一 个 独立 同 分 布 的 、 取 非 负 整数 的 随机 变量 序列 ， 


n 


PY, =i}= a G0). £ X, = (QY) n1, EA: (X nS ARTA, 
k=1 
并 求 其 一 步 转移 概率 矩阵 ， 
f X, 的 值 域 为 {0,1,22 32 = E, Xo = X, H2 VX, Ym Yaon >l, 
有 
PIX, =i, | X, = ¿X 一 和 Xi = à) 
= P(¿, +2 /i Y, YY = ima} 
= PIX. | = ba | X, = ¿3 
MAX nS 0) 是 马尔 可 夫 链 .其 转移 概率 为 
p; = Pli + 2NiY +Y? = j} Sage Gj EE j > i) 
p; =0 QG <i) 
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故 , 转 移 概 率 和 矩阵 为 






DERE RREN m PRB OEE EE. 

m YASLUR AE E S RR, 
po” GD 0s £, € I 
Sp n=1, ¿€I 
JET 

m 二 1 时 , 即 为 一 步 转移 概率 矩阵 . 


规定 : 





证 明 ”由 全 概率 公式 ,有 
pi (m) ss PiX it u 了 | x, = i} 
= YOP {Xren = J iA nm = k | X, = z 


k€ I 


š SPIR s = j | Xmm nE k, X, = i} ka PX a = ai k | X, == i} 


kET 


= XP [Xom = j| Xan = k}P{ Xun = k|X, = i 


k€ I 
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= DPP Q) pi (n +m) 

C-K yË HH , MRA i Hi Ze pk m 十 r 步 到 达 状 态 j 的 过 程 可 分 为 两 个 阶段 : 
先 从 状态 i 出 发 经 过 m 步 到 达 状 态 &, 再 由 状态 & 出 发 经 过 步 到 达 状 态 j. 由 马 氏 
性 可 知 ,后 一 阶段 的 状态 转移 与 前 一 阶段 的 状态 转移 相互 独立 , 故 两 阶段 的 转移 概 
率 是 相 乘 的 关系 . 而 经 过 m 步 到 达 状 态 k 不 受 任何 限制 ,因此 要 对 全 部 的 & 求 和 . 

H C-K 方程 易 得 如 下 结果 : 


推论 4.1 pw = >>: D pa Mpa AH Dep n + h) 


5681561 El 


推论 4.2 p m = Dpp (2 十 1) = Dp n) p, Qn + k) 


r€ 1 r€ 1 
对 于 齐 次 马 氏 链 的 情形 ,可 以 把 C-K 方程 写成 矩阵 的 形式 , 即 有 
pt == 卫 (” PP 
由 此 推出 
P™® = peu P” = ... = (P)” = P” 


其 中 :PP == P. 
4.2.4 Markov 链 的 基本 性 质 


由 上 述 定 理 和 结论 不 难得 到 如 下 马尔 可 夫 链 的 基本 性 质 : 
性 质 1 设 {X,,n 宇 0) 为 马 氏 链 , 其 状态 空间 为 1, 则 
P{Xo = i X, = ias X, = i} 
= P{Xo =i)P IX = à | X, = io} 
| X P{X: =i | X =i )*-P(X, = i | X = in} 
性 质 1 表 明 ,Xo,Xi,X:*，…,X, 的 有 限 维 联合 分 布 可 由 初始 分 布 及 转移 概率 所 
决定 , 即 有 
P{Xo = ios X, = 站 一 in) = Pi Pin Pas Dii 
性 质 2 设 {X,,n 宇 0) 为 马 氏 链 , 其 状态 空间 为 1, 则 
P (X, = ¿, | X, 一 intl ot X, 一 ntm? == P (X, =i, | Xas = inti? 
证 明 PIX, = in | Xea = ¿iu |" Xmm = irm) 
_ PIX, = inmo Xamma = intimas *** X, = inr X, = in} 
P Xmm = immo Xnimi = immi s Kl = i} 
_ PIX. = inim | X, = ¿1 ) P| Krma 一 加 Hi = in | X, = ¿,) 
PIX, = üa | Xa = a P Xem = iea a Ka = ai) 
_ P{Xm = ¿+A Xn = in? 
了 (Xi = ¿i? 
PT N @ =a KR PP a 














I 
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性 质 2 表明 ,一 个 马 氏 链 如 果 按 相反 方向 的 时 间 排 列 , 所 组 成 的 序列 也 是 一 
马 氏 链 . 
性 质 3 设 {X,,n 宇 0) 为 马 氏 链 , 其 状态 空间 为 I, 着 0 三: 三 7 二, 则 在 X， 
= š, 的 条 件 下 ,有 


P{X, = iX, = i, | X, = i} = P(X, = i, 


| X, = IPIK =a, | X. = k 
WR PIX, = ¿ X, = i, | X, = i) = 


PX, = i, , X, = i,, X, = i,} 
P IX, = i} 








_ PIX =; | X =; K, =i PiX = L, = in) 
P{X, = i,} 
= P{X, = i, | X, = i) P{X, = i | X, = i,) 
性 质 3 表明 ,车 已 知 “ 现 在 ”, 则 “过 去 ”与 “将 来 ”是 独立 的 . 
性 质 4 j X 


non > 0) 为 马 氏 链 ,其 状态 空 间 为 I,m 
PIX ,a = imitt Kn = La | Xa S ino 
= PIN = ñus Kua = ñas | X, = 83 
证 明 PIX, a = i Rn = Lan | X, = ¿s Xo = io} 
_ PIX, = ñ Xi =i s KX, = iar Xaa S imot Xon = Lan) 
P(X, = i, X, = ipte, X, = in) 
_ bib, "U bu ¿Pu P 
pi Pont Di 


ln 


“Xu = io} 





rime l! mm 





= | X, = in} P{X n2 = im | Xma = im)? 
s P X ntn = m | An F AET, 
= P{ Xma = imatt Kn = inim | X, = [AN 


性 质 4 表明 , 若 已 知 * 现 在 ”, 则 "过 去 ”对 ”将 来 ” 各 时 刻 


特别 地 ， 


PIX a, = ša | Xa = g, I Xo = ig} = P UX, = ium | Xa = #, ? 


RS 设 {X,,n 宇 0) 为 马 氏 链 , 其 状态 空间 为 1, 则 对 任意 给 定 的 n 个 整数 ， 
0 < b, < Ë, < --- < k, A 
PIX, = i, | Xea =b Xa =à) = PIX, =i, |X, =i,) 
由 性 质 5 易 知 , 马 氏 链 的 子 链 也 是 马 氏 链 . 


的 状态 都 不 产生 影响 . 


4.2.5 一些 例 子 


【 例 4. 3】 


(独立 随机 变量 序列 和 ) ik (6. n > 
分 布 律 为 


0} 为 独立 同 分 布 随机 变量 序 


P (ë, == k}= q k = 0,1,:*° 


TX, = >s ml {X on > 0}&— Markov # , R 
k=0 
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Qa a Ji 
las pei 
证 明 :; (é, n > 0}Æ&— Markov 链 . 
证 明 ” 先 证 {X,,n 二 0,1,2,…) 满足 Markov 性 .由 { 包 , 所 ,…,&，，…) 相互 独 
立 , 有 
PiX: = š: | Xa = Da = = io) 
PIX, = i Xma =i Xi = is Xo = io} 
PIX, = i X, = i, X, = i} 











_ P, = š, — in ei == Z= i teaa" “A = i — toso = ip? 
P(E = Z =a kasq tre |... Ê == Z = io 6 == io) 
= Pié, = in = iri 


= PX, = 4 | Xr — ipi) 
{Xn = 0,1,2,0) 满足 Markov 性 , 且 


n nl 
ps = PIX, =j|X =i) = PD =;| De i) 


2 一 1 
= Pl& =j—i| >)& = ü 
k=0 


= Pih =j—i) =q= Gi) 
[B 4.4] 〈 天 气 预报 问题 ) 设 明 天 是 否 有 雨 仅 与 今天 的 天 气 有 关 , 而 与 过 去 
的 天 气 无 关 . 又 设 今天 下 雨 而 明天 也 下 雨 的 概率 为 a, 而 今天 无 雨 明天 有 雨 的 概率 
为 B; 规 定 有 雨天 气 为 状态 0, 无 雨天 气 为 状态 1. 因此 ,问题 是 两 个 状态 的 马尔 可 夫 
链 . 设 a 二 0.7,B 二 0.4, 求 今天 有 雨 且 第 4 天 仍 有 雨 的 概率 . 
解 ”由 题 设 条 件 ,得 一 步 转移 概率 和 矩阵 为 
Po po p ly ÖT 03 
mea pa aloi a loa | 
T = , 8 2 3545 W 3 E £ 2 
Ò? Coad 0:3 0.61 0.39 
0.4 nakaa H u ap 
四 步 转移 概率 矩阵 为 





P? = PP = [ 


maoria p Sn 


0.5668 0.4332 
从 而 得 到 今天 有 雨 且 第 4 天 仍 有 十 的 概率 为 pe = 0.5749. 

【 例 4.5〗 (竞赛 问题 ) 甲乙 两 人 进行 一 种 比赛 , 设 每 局 比赛 甲 胜 的 概率 是 旋 ， 
乙 胜 的 概率 是 9g, 和 局 的 概率 为 r, 且 pp 十 gq 十 r= 二 1. 设 每 局 比赛 胜 者 记 1 分, 负 者 记 
dn haja Sa 人 获得 2 分 时 ,比赛 结束 . X, k k 3 Z n B W i g: 
得 的 分 数 , 则 (X,,n 宇 1) 是 齐 次 马尔 可 夫 链 . 
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(1) 写 出 状态 空间 I; 
(2) 求 出 两 步 转移 概率 矩阵 ; 


(3) 求 甲 已 获 1 分 时 ,再 赛 两 局 可 以 结束 比赛 的 概率 . 


解 (1)7= {一 2, 一 1,0,1,2}). 
(2) 显然 ,一 步 转移 概率 矩阵 为 


1 0 

Q r 

P= |0 q 

0 0 

0 0 

于 是 ,两 步 转移 概率 矩阵 为 
P” = pP 
i 0 
atro +m 
= q 2rq r* 

0 q. 
0 0 


` "m 
O "> o O 


O Q 


0 
2pr 
十 2pg 
2qr 

0 


0 
0 
0 
p 
1 
0 0 
p 0 
2 pr 0 
batr p+ br 
0 1 


(3) 经 2 局 结束 比赛 包括 两 种 情形 : 甲 得 1 分 经 两 步 转移 至 得 2 分 而 结束 比赛 ， 
或 甲 得 1 分 经 两 步 转移 至 一 2 分 ( 乙 得 2 分 ) 而 结束 比赛 . 因此 ,有 
b = pi? + pi) = (p+ pr) + 0 = p(1 + r). 
在 解 此 题 时 ,常常 会 漏 掉 第 二 种 情形 . 尽管 本 题 中 第 二 种 情形 的 概率 为 零 , 但 


必须 学 会 全 面 ,准确 地 分 析 问 题 . 


【 例 4.6】〗 (广告 效益 的 推算 )A 种 啤酒 的 广告 改变 广告 方式 后 ,经 市 场 调查 发 
现 : 买 A 种 啤酒 及 另 三 种 啤酒 B,C,D( 设 市 场 上 只 有 这 四 种 啤酒 ) 的 顾客 每 两 个 月 


的 平均 转移 率 如 下 : 


A —ü— A(95%) — B(2%) — C(2%) — D(1%), 

B — A(30%) — B(60%) — C(6%) — D(4%), 

C— A(20%) — B(10%) — C(70%) — D(0%), 

D — A(20%) — B(20%) — C(10%) — D(50%), 

设 目前 购买 A,B,C,D 四 种 啤酒 的 顾客 的 分 布 为 (25%,30% ,35%,10%), 求 


半年 后 A 种 啤酒 占有 的 市 场 份额 . 
解 显然 一 步 转移 概率 抵 阵 为 
0.95 0.02 
0.30 0.60 
0.20 0.10 
0.20 0.20 


0.02 
0.06 
0.70 
0.10 


0, 01 
0.04 
0.00 
0.50 
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A u = (my ga P) = (0.25,0.30,0.35,0.10). 
半年 以 后 顾客 的 转移 概率 矩阵 为 PO ,而 
0. 88937 0.04587 0.04656 0.01820 
o ， 0.60175 0.25590 0.09880 0.04355 
P =P = O48340 0.13880 0.36580 0.01196 
0.50090 0.21340 0.14264 0.14306 
因为 只 关心 A,B,C,D 四 种 啤酒 经 三 次 转移 后 转 到 A 种 的 概率 ,所 以 由 P"” 的 第 一 
列 ,得 
0. 88937 
(0. 25,0. 30,0. 35,0. 10) Etas 
0. 48340 
0. 50090 
所 以 A 种 啤酒 在 半年 后 占有 的 市 场 份 额 为 62.2%% ,广告 的 效益 很 好 . 
【 例 4.7】 (随机 游 动 问题 ) 随机 游 动 是 马尔 可 夫 链 的 经 典 例 子 , 它 的 统计 特 
性 由 它 的 边界 行为 所 决定 ,很 多 实际 应 用 例子 都 可 以 看 作 是 随机 游 动 的 模型 . 常见 
的 随机 游 动 有 以 下 几 种 类 型 : 
(1) 自由 随机 游 动 
设 有 一 质点 在 数 轴 上 随机 游 动 ,每 隔 一 单位 时 间 AL GE At = 1) 移动 一 次 ,每 
次 只 能 向 左 或 向 右 移动 Ar 单位 ( 设 Az 一 1). 设 质点 在 0 时 刻 的 位 置 为 5, 它 向 左 
移动 的 概率 为 之 0, 向 右 移动 的 概率 为 gq 宇 0 (p 十 q 一 1), 且 各 次 移动 相互 独立 . 
以 X(n) 表示 时 刻 nn 质 点 所 处 的 位 置 , 则 {XX(n),n 二 0,1,2,…) 是 一 齐 次 马 氏 链 , 其 
状态 空间 为 二 (…, 一 2, 一 1,0,],2,…), 一 步 转 移 概 率 为 


Piim = Po iE 1,0 < p <1 
baai = q = 1— p, ¿€ I,0—< p—<1 
Dy =Q ¿Z i+l,i—1,Jj € I 
Jt — 3 3: 45 3 38 E £ 2 
b 0 q 
P == p 0 q 
b 


(2) 带 有 一 个 吸收 壁 的 随机 游 动 

设 (1) 中 的 随机 游 动 限制 在 1 二 (0, 1, 2,…}) 内 , 当 质 点 移动 到 状态 0 后 就 永远 
停留 在 该 位 置 , 即 po 二 1, 其余 py(i,j 宇 1) AA). 这 时 序列 {X(n),n 宇 0} 称 为 带 有 
一 个 吸收 壁 0 的 随机 游 动 ,其 特点 是 : 当 XG) = 0 时 ,XGOz 十 1) 就 停留 在 零 状 态 . 
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此 时 {XX(n),n = 0,1,2,-:) 是 一 齐 次 马 氏 链 , 其 状态 空间 为 下 = (as 
一 步 转 移 概率 为 


Pur = Do i>l, an El 
piin =Q i> 1, € I 
b; =0, j2Z i+ l,—1,iZ>1,i€ I 
bo = 1 
其 一 步 转移 概率 矩阵 为 
i Q 
p= p 0 q 
P 


9 

(3) 带 有 两 个 吸收 壁 的 随机 游 动 

设 (1) 中 的 随机 游 动 限制 在 工 一 {0,1,2,…,m) 内 , 当 质 点 移动 到 状态 0 或 m 
后 就 永远 停留 在 该 位 置 , 即 po — 1 ,pwmm 二 1, 其 余 p, (1 < ¿,j< m—1) AA). 这 
时 序列 {XX(n),n 宇 0) 称 为 带 有 两 个 吸收 壁 0 和 mm 的 随机 游 动 .此 时 {X(n),n = 0, 
1,2,…}) 是 一 齐 次 蕊 氏 链 ,状态 空间 为 1 二 {10,1,2,…,m),0,m 为 两 个 吸收 状态 , 它 
的 一 步 转移 概率 为 
Pini = p (1< ¿=< m— 1) 
b. —q= 1—pb (1<¿i=<m=—1) 
b; = 0 (G= i+l,i—1;1 < ¿i=<m—-—1) 
bo = 1 
bsa = 1 
po = 0 G#0) 
b, 50 G =m) 
Jt. — J 3: 45 8 3 E E 29 
1 0 0 0 0 = 0 0 0 0 
p 0 q 0 0 = 0 0 O 
0 p 0 q 0 0 0 0 





0 0 0 0 0 = 0 p 0 q 
0 o ô 0 Ow 0 0 O Tiski 

(4) 带 有 一 个 反射 壁 的 随机 游 动 

RSA I= {0,1,2,…), 且 Po = 0,Pa = 1, 则 序列 {X(n),n 宇 0) 称 
为 带 有 一 个 反射 壁 (状态 0) 的 随机 游 动 . 它 的 一 步 转 移 概 率 为 
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biim = b Gl) 
baa = q=1—p G1) 
p; =0 (JZ ¿:+1,:—1;: 21) 


boa = 1 
bo = 0 
其 一 步 转移 概率 矩阵 为 
0 1 
pelé g 
p 


(5) 带 有 两 个 反射 壁 的 随机 游 动 
此 时 的 状态 空间 为 I= {0,1,2,…,m}), 且 po = 0, po = l,b;x = Ü Dmi = 
1, 两 个 反射 壁 为 状态 0 f m. 则 其 一 步 转移 概率 为 





Dra =p G1 = ¿=< m — 1) 
Dai == q = I— p . I = i= m l 
P = 0 (j= p l == l Í = S€ == 1) 
42o = 0 
pa = 1 
Domm = 0 
pam1 = 1 
N) È 65 — 2 th 45 W 3 E £ 2 


0 1 0 0 0 = 0 0 0 0 
p 0 q 0 0 = 0 0 0 0 
0 p 0 q 0 0 0 0 0 
0 0 0 0 0 = 0 p O 
0 0 0 0 0 = 0 0 

(6) 带 有 一 个 弹性 壁 的 随机 游 动 

此 时 的 状态 空间 为 了 = {0,1,2,…}, 且 po 一 cpu 一 Ba+p8=1), 0 <a < 
1 ,一 个 弹性 壁 为 状态 0. 则 其 一 步 转移 概率 为 








° 心 


(m+1])X(m+1]) 


biii 5 P 

Pun = q =1— p 
Po = a 

ba =B il 


b; = 0 
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其 一 步 转移 概率 和 矩阵 为 


【 例 4.8〗 (M / G /1 排队 系统 ) 假 设 顾客 依 参 数 为 的 Poisson 过 程 来 到 只 有 
一 个 服务 员 的 服务 站 , 若 服务 员 空 闲 来 客 就 立刻 得 到 服务 ,否则 排队 等 待 直至 轮 到 
他 . 设 每 名 顾客 接受 服务 的 时 间 独 立 同 分 布 , 分 布 函数 为 CCZz), 且 与 顾客 到 达 过 程 
相互 独立 . 这 个 系统 称 为 M/G/1 排队 系统 ,字母 M 表示 顾客 到 达 的 时 间 间 隔 服从 
指数 分 布 , G 表示 服务 时 间 的 分 布 ,1 表示 单个 服务 员 . 

AX, 表示 第 n 个 顾客 服务 完毕 时 等 待 接受 服务 的 顾客 数 ,再 令 U, 为 第 n 个 顾 
客 接 受 服务 的 时 间 内 来 到 服务 机 构 的 顾客 数 , 则 

Xai = X, —6( Xa) FHU rti 
lit > Ü 
0,z = 0 
AX, sn 一 0,1,2,…)} 是 齐 次 Markov 链 ,其 一 步 转移 概率 为 
bi Qn) = P(U, aI = j—i+ë8G)),Vn2>1 

证 明 Hf Xa = XX, 一 6(X;) 十 Uii, 且 Ui 与 {Xisk 二 1,2,…,n)} 相互 独 
立 , 从 而 

P X, = ipn | x, =i, + eam = im ED, e = iij 

_ P(X, = (RX) Un i= T uq An = Z. Aar = Q. s aN —= P$ 
PIX, = i = L y sss; Xi == 44) 
_ PIU, = ina — in Hlin) Xn = ino Xea = iu s X, = ú) 
PIX, = ps a = ü; 1 sA = h 
PUn = i —¿, t+6(i)} Yn l 


3 P ó(z) = 











同 理 可 证 
| 

从 而 {X, 光 一 0,1,2,…) 满足 Markov 性 .再 注意 到 顾客 接受 服务 的 时 间 是 独 
立 同 分 布 的 ,从 而 其 一 步 转移 概率 与 即 无关, 即 该 Markov 链 也 是 齐 次 的 . 

【 例 4.9】 (离散 分 枝 过 程 ) 离散 分 枝 过 程 是 Markov 过 程 的 重要 特例 ,常用 来 
描述 细胞 分 裂 , 种 群 繁衍 ,粒子 裂变 等 现象 ,在 随机 过 程 的 理论 和 应 用 中 占有 非常 
重要 的 地 位 .下面 介绍 的 模型 是 英国 博物 学 家 Galton Watson 在 研究 家 族谱 系 关 系 
时 引入 的 ,因此 也 称 为 Galton-Watson 分 枝 过 程 (简称 G-W 过 程 ). 

考虑 一 个 能 产生 同类 后 代 的 个 体 组 成 的 群体 . 每 个 个 体 以 概率 p, .m 2 0 产生 
m 个 新 后 代 , 且 与 别 的 个 体 产生 的 后 代 个 数 相互 独立 .初始 的 个 体 个 数 为 义 , ,其 后 
代 构 成 第 一 代 , 总 数 记 为 X. 以 此 类 推 ,以 XX, 表示 第 代 的 总 数 , 记 &" 表 示 第 n 代 
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的 第 i 个 个 体 产 生 的 后 代 个 数 ,那么 {X,,n 二 0,1,2,…}) 就 为 一 个 Markov 链 , 称 之 
为 时 间 离 散 的 分 枝 过 程 . 

R(E ,i 二 1,2,…;n = 1,2,…) 为 概率 空间 (Q,5,P) 上 的 一 族 独 立 同 分 布 
的 取 非 负 整 数 的 随机 变量 ,其 公共 分 布 为 {as = PEP = k),k >> 0). 车 定义 Xo 为 
R 上 的 任意 取 正 整数 的 随机 变量 且 


| 
X, = J e n 1, ye 
i=1 


则 称 {X,,n = 0,1,2,…}) 是 一 个 离散 时 间 的 分 枝 过 程 ,或 分 枝 链 . 则 {X,,n = 0.1, 
2,…)》 为 齐 次 Markov $, H 


see e 
ə[c2>last)' | 
= k=0 
J !9s’ s=0 
证 明 E(X, n = 0,1,2,*…} 为 齐 次 Markov 链 . 
注意 到 X, 只 依赖 于 独立 同 分 布 的 随机 变量 {8” ,i 二 12， 和 一 1 2) 
从 而 


ps 


P (X, = z, X. = in s**a X. = ¿1 y ACO = io? 


PiX, u e E = Lal p X = ?1 +N = io) 
P{ Xs = iri S. E = ¿r aÑ Q = io} 











‘nl 
PiS e = ia A.I = iit X] = j Xo = io} 
k=1 
Pi Xm = imitt’ Xi = iX = io? 





i 
= P( P g =a =P = i Xa a) 


fl 
因为 {8&”,i 二 1,2,…;n 二 1,2,…) 独立 同 分 布 ,从 而 转移 概率 p J n Z X , Ep 

{X on 一 0,1,2,…} 为 齐 次 Markov 链 . 
由 母 函 数 的 性 质 (独立 同 分 布 随机 变量 和 的 母 函 数 等 于 母 函 数 之 积 ) 知 ， 


27 b s 二 [f(s)J', 其 中 f(s) 为 分 布 为 {as = PE = k),k > 0) 的 母 函 数 , 即 
十 co 
fs) = 27 as. 进一步 ,再 由 母 函 数 与 概率 分 布 的 关系 得 


十 co 十 ec 
2È) past) SANs | 
= k=0 = k=0 
j 10s’ eq jla pem 


ij 
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4.3 Markov 链 的 状态 分 类 及 性 质 


4.3.1 状态 分 类 


本 节 只 讨论 齐 次 马尔 可 去 链 {X, ,7 全 0) 的 状态 分 类 , 设 状态 空 间 为 1 二 (0,1， 
2,…)} ,一 步 转移 概率 为 pi ,i,j € I. 
下 面 由 一 个 简单 的 例子 引入 .假设 系统 有 三 种 可 能 状态 TI 一 (1, 2, 3}.“1” 表 
示 系 统 运行 良好 ,2” 表示 系统 运行 不 正常 3” 表示 系统 失效 . 以 X, 表示 系统 在 
时 刻 n 的 状态 , 并 设 1X ,7 二 0}) 是 一 Markov 链 . JL — J 3k 4538 38 £ É 22 
Gh Ol 06 


P=|0 0.1 0.9 
o g i 
用 状态 转移 图 表示 为 
0.6 
0.3 S q 
a 99 


可 见 , 从 状态 “1” 或 “2” 出 发 经 有 限 次 转移 后 总 要 到 达 状 态 “3”, 而 一 旦 到 达 状 
态 “3” 则 永远 停 在 状态 “3”. 显然 状态 “1”,“2” 与 状态 “3” 概 率 性 质 不 同 , 因此 ,可 以 
依 概 率 性 质 对 状态 进行 分 类 . 
EMAS- H Xon > 0) £ Markov #£,¿,j € LEGE n > 0 使 得 py > 
0, 则 称 i 可 达 j, 记 为 1 一 j; Bij joi MRi Mj 是 互通 的 , 记 为 2 


THL? Hae 种 等 价 关系 ,即将 中 
(1) 自 反 性 :i<>1i. 
(2) WREE iej M jei 
(3) 传递 性 : 若 ioj, jek, M i<>k. 
证 明 WR ic k.,k — j, WEA, Sa 1,144 
b = Ü, bu? >> 
根据 C-K 方程 ,有 
p = D pp pp > 0G(k € D 


m€1 


因此 ,i 一 j. 同 理 可 以 证 明 互 通 的 情形 . 
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注 :根据 等 价 关 系 的 性 质 , 可 以 把 两 个 互通 的 状态 归 为 一 类 , 则 同一 类 的 状态 
是 互通 的 ,并 且 任 何 一 个 状态 不 可 能 同时 属于 两 个 不 同 的 类 ， 
【 例 4.10] 3 I= {0,1,2) ,一步 转移 概率 矩阵 为 
1⁄2 1⁄2 G@) 
1/2 1⁄4 1⁄4 
0 1⁄3: 2⁄3 
画 出 状态 传递 图 并 分 析 各 状态 间 的 关系 . 
解 状态 传递 图 如 图 4.1 所 示 . 


P= 





图 4.1 
由 状态 0 可 达 状态 2,@ 一 > 一 > @, 
由 状态 2 可 达 状 态 0,@ — 2, Q @. 
定义 4.6， 若 Markov 链 只 存在 一 个 类 , 则 称 它 是 不 可 约 的 马 氏 链 . 否则 称 
Markov 链 是 可 约 的 . 
定义 4.7 设 CCI 是 状态 空间 的 一 个 子 集 , 若 对 ViE€EC,Vj Ci 不 可 
达 j7, 则 称 C E I 的 一 个 闭 集 . 


注 : 若 C 是 一 个 闭 集 , 则 对 任意 n, Dp = j: 


je C 


【 例 4.11] 请 分 析 下 面 Markov 链 的 状态 的 类 . 


1⁄2 1/2 ð 
(DP = |1/2 1/4 1⁄4]; 
© 2⁄3 1⁄3 
0.5 0.5 0 0 
. 0.5 0.5 0 0 
(2)P = 
0.25 0.25 0.25 0.25 
0 0 0 1 





解 (1) 是 不 可 约 Markov 链 ; 
(2) 有 3 个 类 ,(0,1),{2),{3), 其 中 10,1) 是 一 个 闭 集 . 
定义 4.8 ”对 于 任意 的 i,j € LFR: 
人 
为 从 状态 i 出 发 首次 到 达 ( 进 入 ) 状态 ; 的 时 间 ( 时 刻 ) ,简称 首 达 时 间 . 
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首 达 时 间 T, 是 一 随机 变量 , 它 取 值 于 Ne 
定义 4.9 对 于 任意 的 :7 € 天 称 
fP 会 P{Ty = n|X, = i) 


为 系统 在 0 时 从 状态 i 出 发 ,经 nn 步 首次 到 达 状 态 7 的 概率 . 
由 定义 4.9, 显 然 有 





fP = PIX, = j; X, £ jm = 1,2,.,n—1|Xo = i) 
f =p = PX = y| Xs = i) 
fy = PIX, # j, Vm > 1|X, = i) 


定义 4.10 NFER ij € 7, 称 
J; po FP E 


1 < 十 ce 


为 系统 在 0 时 从 状态 i 出 发 ,经 过 有 限 步 转移 后 迟早 到 达 状 态 j 的 概率 . 
P (T, =+ eo) fe 


二 1 一 方 , 它 表示 系统 在 0 时 从 状态 ;出 发 ,经 过 有 限 步 
转移 后 不 可 能 到 达 状 态 7 的 概率 . 


下 面 给 出 首 达 概率 如 下 的 基本 性 质 : 
定理 4.4 


S PI =n K l P Sie) 
1<n<+co 


(1) 首 达 概 率 可 以 用 一 步 转移 概率 表示 , 即 
f a 2; 2e Dba Pii Tear 


i j a ai 


(2) 对 于 任意 的 ij € T, 首 达 概 率 与 ” 步 转移 概率 之 问 有 如 下 关系 ; ， 


p = DIP = ARTo la nato 
I=] i=l 
(3) 对 于 任意 的 i,; € I, £ 0 < f 


Y Kf Ilis jTi 是 从 i 出发， 
首次 返回 i 的 时 刻 ;fs 是 从 状态 i 出 发 ,迟早 要 返回 状态 1 的 概率 . 
(4 对 于 任意 的 i,7 € I, fu > 0@i— j. 
(5) 对 于 任意 的 i,j € L, f; > 0 B f, > 0@:=>j. 
证 明 结论 (1) 与 (3) 显然 成 立 .下 面 只 证 结论 (2) 和 (4),(5) 是 结论 (4) 的 推 
广 .考虑 先 证 明 (2) : 


PIX, = ; | X, = ;) = PI Ú Fo = N = 2] X: =n 


= J PIT; =I,X, =;j| X =à 
7 一 1 


= ý PD = LX, = j,X, = i) 
— PIX, = Ə 








= X PX =j| T, =I,X, =üP(T, =| X = ü 
1=1 
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P(X, =j|X =j,X, Æ jik = 1,250 l — 1, X, = i) f 
= YPIX, =;| X, = i) 

l=1 
== > 

l=1 


RN A e a a a =i 22 Dk Nb 
f? = P{T; = w |X = i)= p > 0 








因此 
m= buyn =, y = ü 
n=1 
反之 , 当 方 二 0 时 ,3 > 0, 使 得 O — 0, A mm p > 0,48 i — j. 


4.3.2 常 返 性 判别 及 其 性 质 


定义 4.11 (周期 性 ) 若 集 合 {n: n= 1, p > 0) EÈ. BJ HR B Ez X Z 25 £ 
d 二 d(i) 为 状态 i 的 周期. #d>l, BI); | i 是 周期 的 ; ;车 4 = 1, 则 称 i 是 非 周 期 的 . 
并 特别 规定 , 若 上 述 集合 为 空 集 , 则 称 i 的 周期 为 无 穷 大 . 
定理 4.5 ”周期 性 是 类 的 性 质 , 即 若 状态 i 和 j 同属 一 类 , 则 d(i) = dG) 
证 明 H T ej. MEE mn 49 >o B. p> 之 0, 因 此 由 CK 方程 有 
pusha = Dp pi >0 
对 所 有 满足 pi > 0 的 s 都 有 
p > pP pP b > 0 
B m + n 和 mm 十 n 十 ss 都 是 dG) 的 整数 倍 , 故 dG) 可 以 整除 s. 而 s 是 4d0) 的 整数 
倍 , 所 以 dG) 也 整除 dG). 反 过 来 也 可 以 证 明 dG) 整除 dG). FÆ dG) = dG). 
定义 4.12 ”对 于 状态 i€E LUR fe FL ` 为 常 返 态 (返回 态 ) ;如 
Rf 过 1, 则 称 状态 i 为 非常 返 态 ( 滑 过 态 )， 
注 :对 于 任何 状态 i,j, 以 f 表示 从 i 出 发 经 n 步 后 首次 到 达 j 的 概率 , 则 有 
f =9 
SP = P{X, 5j Xe Aj Y0<k<n| X =i} n>1 
容易 看 出 ,集合 A, = {X, 5j X Z j,V0<k<nlX, = i} Æ n RER 


相交 ,并 且 U A, 表示 总 有 一 个 使 得 过 程 经 过 步 后 可 从 i 到 达 j. S = > 


表示 从 i 出 发 ,在 有 限 步 内 可 以 到 达 j 的 概率 . 因此 ， i 
¿ 是 常 返 状 态 S f, 
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¿ 是 非常 返 状 态 €> f, < 1 


令 js zs E(T; | X, = ¿) 一 >n f ,其 中 Hi 表示 从 状态 i 出 发 ,首次 到 达 状 态 


n=1 


J 的 平均 转移 步 数 (时 间 ). 特别 地 ,车 i 二 j, 则 yi 会 jy 是 从 状态 i 出 发 ,首次 返回 状 
态 i 的 平均 转移 步 数 , 称 为 状态 i 的 平均 返回 时 间 ; 对 应 的 f, 称 为 状态 i 的 返回 概 
率 ;fs” 称 为 从 状态 i 出 发 ,经 过 nn 步 转移 首次 返回 状态 i 的 概率 . 

对 于 常 返 态 ¿€ I, Æp 去 十 co, 则 称 ; 是 正常 返 的 . 否则 称 i 是 零 常 返 的 . 特别 
地 ,若是 正常 返 且 周期 为 1, 则 称 ;是 遍历 的 .若是 遍历 的 , 且 f; = 1, 则 称 i 是 
吸收 状态 . 





" 
定理 4.6 ¿ERES =O 


m= 0 
+o : ; 
i i a EE oo 
loBa = piy <HA lim p = 0. 


证 明 ”首先 证 明 , 对 任意 状态 i,j K 1 < n —+ co ,# 


I 
C: < (k) ( k) 
p = ,FR 
k=1 


事实 上 ,由 C-K 方程 可 得 
bi = P 1 X, s= g | X, = i} 


= DsP{{X,) 在 时 刻 & 首 次 到 达 7 ,再 从 时 刻 上 经 nn 一步 后 到 达 j) 


n 


=> P{X, =j | XX =j, X Æj 0 <Ll<k,X = i) 
1 


k= 


e PIX, =j,X, Z j0<1<k| X = i} 


= DP{X, =j | X% =j)P(X, =;j,X,Zj,0<I<k|X = i} 


k=l 


n 


2 (k) (n—k) 
= >, š Pi 


k=1 


因此 ， 
Dpr = pe ra 2 2 19 p= 


n=0 n=] k=1 


十 cc + 


一 1 十 > SDP 
k=l n=k 


1 SD 
to >P: 


= 1 + f; Sp 
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所 以 ， 了 = E 


wE = Sra 是 非常 返 状态 , 且 考 虑 级 数 2) ps” 是 
收敛 的 ,因而 有 lim p? = 0; 








(2) > p> = 十 全 fi = 1Si 是 常 返 状态 . 
n=0 


定理 4.7 ”党 返 性 是 一 个 类 的 性 质 , 即 若 状态 ; 和/ 同属 一 闫 , 则 ; 和 ) 同 为 
常 返 或 非常 返 态 . 


证 明 由 于 i>j, 故 存在 n 和 mm, 使 得 p” > 0p > 0, 由 CK 方程 有 
py S = py pb pu” 
permo Ss pom p n p tn 
求 和 得 


2: pita >> pp m) 3 p? 
(n+m+l) (m) (n) (p 
pg > pp Dp 


因此 ， > py m 是 相互 控制 的 , 同 为 无 穷 或 有 限 , 故 ; 和 7 同 为 常 返 或 非常 返 


太 


W. 


归纳 状态 分 类 图 如 图 4. 2 所 示 . 
非常 返 态 
Wee 


EWES | 


状态 





WES 有 周期 
非 周 期 (遍历 态 ) 

图 4.2 
【 例 4. 12〗 一 个 状态 空间 为 1 二 10,1,2,3} 的 马尔 可 夫 链 ,其 一 步 转移 概率 


矩阵 为 


0 © 1⁄2 1⁄2 

I 0 0 0 
P =: 

0 1 9 0 

© 1 0 0 


试 对 其 状态 进行 分 
解 NANE ss s š 65 , ALARA 
都 是 常 返 态 . 其 状态 传递 图 如 图 4.3 所 示 . 
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图 4.3 
[@J 4.13] 设 I 二 {1,2,3,4}) ,其 一 步 转移 概率 和 矩阵 为 
1/2 1⁄2 0 O 
1 ô Ó Ó 
0 1⁄3 2⁄3 0 
12 © 1⁄2 0 
试 对 其 状态 进行 分 类 ,确定 哪些 状态 是 常 返 态 ,并 确定 其 周期 . 
E 画 状 态 传递 图 如 图 4.4 所 示 ， 





图 4.4 
B Ayin, fP 二 0, 所 以 f4= 二 0 二 1. 从 而 知 状 态 4 是 非常 返 态 .又 fu 


= T. fp = 0022), MA fa 一 二 二 1. 从 而 知 状态 3 也 是 非常 返 态 .而 


fu = fi + fi? = 1⁄2 +1/2 = 1 
fa = f +f? + = 0 + 1/2-4-1/22 + = 1 
所 以 状态 1 和 状态 2 是 常 返 态 . 又 知 


+ 
m= HP =le gH += Tt 


十 cc 


p= 22nfp = 11042. + +3: z = 3 <+ 


n=1 


而 其 周期 均 为 1, 故 状态 1 与 状态 2 是 正常 返 态 , 且 为 遍历 态 . 

【 例 4.14] 设 马 尔 可 夫 链 的 状态 空间 I= {0,1,…), 其 转移 概率 为 pun 一 
1/2, po = 1/2,i 三 0,1,2,…, 试 画 出 状态 传递 图 并 对 其 状态 进行 分 类 . 

解 ”状态 传递 图 如 图 4.5 所 示 . 


fo = EMi == £ = 1 


故 状 态 0 是 常 返 态 . 
又 任 一 状态 i 都 与 0 相通 ,所 以 由 判别 准则 知 , 任 一 状态 i 都 是 常 返 态 .而 jo = 
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% 
xk 





1/2 1/2 1/2 1/2 
eS, 25, Ñ 


图 4.5 
十 ca 
Dn 高 二 十 ,所 以 状态 0 是 常 返 态 ;又 po 一 于 > 之 0, 故 状态 0 是 非 周期 的 ,而 
n=1 
且 是 遍历 的 . 故 依 判 别 准则 , 任 一 状态 i 都 是 遍历 的 . 
当 状 态 较 多 时 ,逐个 对 状态 进行 计算 是 困难 的 . 如 果 状 态 是 相通 的 ,选择 其 中 


一 个 易于 识别 的 状态 进行 计算 和 识别 ,也 就 识别 了 其 余 的 状态 ,从 而 可 以 大 大 减少 
工作 量 . 


[B] 4. 15] 已 知 马 尔 可 夫 链 {X,,n 宇 0) 的 状态 空间 了 = {1,2,3,4) ,其 转移 
概率 矩阵 王 的 状态 转移 图 如 图 4.6 所 示 , 试 对 其 状态 进行 分 类 . 





图 4.6 


E BAA pu =1/4,%{n, pi > 0) 的 最 大 公约 数 d 二 1, 所 以 状态 1 是 非 周 
期 的 . 从 而 每 一 状态 都 是 非 周 期 的 . 
考虑 状态 1] 是 否 是 常 返 态 . 因为 JP 一 1⁄4, m 








fi = P(X, = LX së 1 | X, = 1) 
= P{X; = 1,X, =2| X =1)+P(X, =1,X, =3 | X, = 1) + 
PT, = jX 4 | X; = 15 
= PIX, = 1 | X, = 4,X, = 11PíIX, =4 || X, = 1) 
= py Pu = 
类 似 可 得 fp — T fip = T. fp = tn > 5. 
E 人 
Ma fa = HA 一 天 十 天 十 于 直 于 = likaa l k 385. 
n=1 
又 ja = 27nfip =E <o, ff Ak 8 1 是 正常 返 态 . B 2 5 k S 4838 AA 
n=1 


别 准则 ,所 有 状态 都 是 正常 返 态 .因而 都 是 遍历 的 . 
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4.3.3 Markov 链 的 状态 空间 分 解 


定理 4.8 ”状态 空间 中 常 返 状态 的 全 体 是 一 个 闭 集 . 

证 明 ”只 需 证 明 , 若 i 是 常 返 状 态 , 且 i 一 j), 则 fi = 1, Am ici, 是 常 返 状 态 . 
事实 上 , 若 方 二 1, 则 以 正 概率 1 一 方 二 0 使 得 从 7 出 发 不 能 在 有 限 步 内 回 到 ,; 这 意 
味 着 系统 中 存在 一 个 正 概率 ,使 得 从 i 出 发 不 能 在 有 限 步 内 回 到 i, 从 而 f, < 1. 

定理 4,9 ”任意 Markov 链 的 状态 空间 工 可 唯一 地 分 解 为 有 限 个 互 不 相交 
ffe D.C, ,C;,… 之 和 ,使 得 

a) 每 个 C， 是 常 返 状态 组 成 的 不 可 约 闭 集 ， 

(2)C, 中 的 状态 同类 ,具有 相同 的 周期 , 同 为 正常 返 , 或 同 为 零 常 返 ; 

(3) 中 的 状态 都 是 非常 返 状 态 , 从 C, 中 的 状态 出 发 不 能 到 DD 中 的 状态 . 

证 明 i C 为 全 体 常 返 状 态 组 成 的 集合 , 则 D = I— C 为 非常 返 状 态 全 体 ,将 
C 按 互通 关系 进行 分 解 , 得 

TI=DUCUGCU:… 
其 中 每 一 个 C, 都 是 由 常 返 状态 组 成 的 不 可 约 闭 集 . 由 于 常 返 性 和 周期 性 是 类 的 性 
质 , 因 此 C, 中 的 状态 具有 相同 类 型 ,日 C, 中 的 状态 不 能 到 达 D 中 的 状态 . 
定理 4. 10 nr 其 状态 空间 了 可 唯一 地 分 解 为 d 
个 互 不 相交 的 子 集 之 和 , 即 
1=U DL ND = Øi 
且 使 得 自 二 中 的 任意 状态 出 发 ,经 一 步 转移 必 进 入 ;1 中 (其 中 五 王石 ). GERR) 

以 上 的 状态 空间 分 解 定理 说 明 ,状态 空间 的 状态 可 按 常 返 态 与 非常 返 态 分 为 
两 类 . 非常 返 态 组 成 集合 D; 常 返 态 组 成 一 ire ste 闭 集 C 又 可 按 互通 关系 分 为 若 
干 个 互 不 相交 的 基本 常 返 闭 集 C ,Cs ,…. 一 个 马尔 可 夫 链 ,如 果 从 D 中 某 个 非常 
返 态 出 发 , 它 或 者 一 直 停留 在 D 中 ee 常 返 闭 集 C, , 
一 旦 进入 ,就 永 不 离开 ;一 个 马尔 可 夫 链 ,车 从 某 个 常 返 态 出 发 , 必 属 于 某 一 个 常 返 
闭 集 Ci , 则 马尔 可 夫 链 将 永远 停留 在 这 个 闭 集 C, rh. 

一 般 地 , 设 SC IWR i EURER a> 0 及 状态 j ESAE pP > 


0, 则 称 S 为 开 集 . 设 SCTIT, 则 称 包含 S 的 最 小 闭 集 为 S 的 闭 包 , 记 为 5S, 任 一 状态 i 


KEEL) = (i) U {k:i k}. 
基于 以 上 论述 ,将 状态 空间 工 中 的 状态 依 D.C, ,C, ,… 的 次 序 重新 排列 , 则 转 
移 概 率 矩 阵 具 有 以 下 的 形式 : 
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Pp Po, Po 
P; Ci 
P, C: 


P = 


其 中 Pi , P, ,… 均 为 随机 矩阵 ,它们 对 应 的 链 是 不 可 约 的 . 称 以 上 形式 的 转移 概率 


和 矩阵 为 标准 形式 . 
当 一 个 马尔 可 夫 链 的 状态 空间 是 一 个 有 限 集 合 时 , 称 为 有 限 马尔 可 夫 链 . 它 具 
有 以 下 性 质 : 


(1) 所 有 非常 返 态 组 成 的 集合 都 不 是 闭 集 . 
( 反 证 法 ) 车 是 闭 集 , 则 对 任何 i € D, 有 2》)p5” 二 1, 但 是 由 非常 返 性 知 ， 


lim p?” = 1 相 矛 盾 . 
十 co 


ne 十 © 


lim pf” 一 0, 这 与 0 一 > 
1 十 cc 


j€ D 
(2) 有 限 马尔 可 夫 链 没有 零 常 返 态 . ( 反 证 法 ,读者 自己 证 明 ) 
(3) 有 限 马 尔 可 夫 链 必 有 正常 返 态 . 


由 转移 概率 的 性 质 知 ,总 有 >p = 1. 由 于 状态 空间 TI 有 限 , 则 求 和 与 取 极 限 


jel 
运算 可 交换 ,于 是 
lim Dp = SD lim pP = 1 
nt STT SZI "+ 


即 不 可 能 对 一 切 7 都 有 lim pP = 0. AFERE k 使 得 lim p” 天 0, 则 状态 & 即 为 
正常 返 态 . 

(4) 有 限 马 尔 可 夫 链 的 状态 空间 可 分 解 为 

I = D+ QO, + + C, 

其 中 D 为 非常 返 态 集合 ,C,,i = 1,2,…,k 是 正常 返 态 集合 . 

(5) 不 可 约 有 限 马 尔 可 夫 链 只 有 正常 返 态 . 

由 于 有 限 马 尔 可 夫 链 是 不 可 约 的 ,因而 整个 状态 空间 只 能 构成 唯一 一 个 闭 集 . 
而 非常 返 态 集合 不 是 闭 集 , 所 以 只 能 是 由 正常 返 态 组 成 一 个 闭 集 . 

【 例 4.16] 设 蕊 尔 可 夫 链 {X,,n 宇 0) 的 状态 空间 1 二 {1,2,…,6}), 其 转移 概 
3 #E £ 2 


0 0 1 0 0 0 
0 0 0 0 0 I 
0 0 Q 0 | 0 
P= 1⁄3 1⁄3 0 1⁄3 0 0 
1 0 0 0 0 0 
0 1⁄2 0 0 0 1⁄2 
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试 分 解 此 马尔 可 夫 链 并 求 出 各 状态 的 周期 . 
E 状态 传递 图 如 图 4.7 所 示 . 





故 fl1 二 1, 状态 1 为 常 返 态 .ju = nfi 一 3, 由 状态 1 生成 的 基本 常 返 闭 集 为 C， 


类 似 地 ,状态 6 是 正常 返 态 ,ws 一 3/2, 由 状态 6 生成 的 基本 闭 集 C, = (6) = 
{2,6). 
D = 14) 是 非常 返 集 , 从 而 状态 空间 
I= {4} U {1,3,5} U {2,6} 
因 fP 之 0, 故 状态 1 周期 为 3, 从 而 C, 中 状态 周期 均 为 3. 又 /全 全 0, 故 状 态 
6 是 非 周期 的 , 即 C, 中 状态 是 遍历 的 . 同样 , 因 fU 之 0, 故 状 态 4 也 是 非 周期 的 . 
【 例 4.17] 设 马尔 可 夫 链 的 状态 空间 了 二 (0,1,2,3) ARBA # É 2 
19 329 g 0 
1⁄2 1⁄2 0 0 
1⁄4 1⁄4 1/4 1⁄4 
0 0 0 1 


P= 


求 状态 空间 的 分 解 
解 ”状态 传递 图 如 图 4.8 所 示 . 





图 4.8 
由 于 状态 3 不 可 能 到 达 任 何其 他 状态 ,所 以 是 常 返 态 . 状态 2 可 到 达 0,1,3 三 
个 状态 ,但 从 0,1,3 三 个 状态 都 不 能 到 达 状 态 2, 但 0 与 1 两 状态 相通 ,构成 一 个 党 
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ASMR LDP 一 于 二 1, 所 以 状态 2 为 非常 返 态 . 于 是 状态 空间 分 解 为 工 一 
n=1 


(2 + 10.1) + {3}. 
4.3.4 类 之 间 的 转移 和 赌 徒 输 光 问题 


首先 考虑 如 下 问题 : 设 7 是 一 给 定 的 常 返 状态 ,D 是 由 全 部 非常 返 状 态 组 成 的 
集合 .对 i€ D, 如 何 计算 fi , 即 过 程 从 i 出 发 迟早 到 达 j 的 概率 . 


定理 4.11 £ j 是 常 返 的 , 则 概率 组 {f; ,i € D) 满足 
Tal D bale F Sa 
keD kEC 
其 中 C 是 所 有 与 7 相通 的 状态 的 集合 . 
证 明 
fi = P(3n<+eo,X, = j | X, = å} 
= >)P{ 了 < 十 ceo,X =j | X=i,X =b)P(X, =k | X, = i} 


kES 
= > ba fy + Dsus T 2 Iba fu 
ke D AEC REC 
ED 
= DB 十 DJ pa 
£ED keEC 


其 中 第 二 个 等 式 是 利用 CK 方程 ,最 后 一 个 等 式 是 利用 车 和 j 互通 , 则 fy = 1. 
…【 例 4.18】 〈 赌 徒 输 光 问题 ) 考虑 一 赌 徒 ,在 每 局 赌博 中 他 以 概率 户 赢 1 元 ,以 
概率 9 二 1 一 p 输 1 元 ,如 果 他 输 光 或 获得 NN 元 , 则 赌局 结束 . 假定 各 局 赌博 是 独立 
的 , 赌 徒 开始 有 i 元 , 问 他 的 赌 金 到 达 0( 输 光 ) 之 前 达到 N 元 的 概率 是 多 少 ? 

解 以 X, 记 赌 徒 在 时 刻 7 的 赌 金 , 则 (XX,,，n 二 0,1,…) 是 Markov 链 ,其 转 
移 概 率 为 

be = pw = 1 
Pn == Ps Pisa = 1— p, ¿= 1,2*=== N == 1 

此 Markov 链 可 分 为 三 类 : {0}、{N}、{1,2,…,N 一 11), 其 中 第 一 和 第 二 类 是 常 返 
的 ,第 三 类 是 非常 返 的 . 

记 f, = fiw, 表 示 赌 徒 从 i 元 的 赌 本 开始 ,最 终 达 到 N 元 的 概率 .根据 命题 ,有 

fi = pf F qf i= 1,2,--,N—1 

WT pb-i q = 1, 


faa — f, = I: = fer) 
W +T fo = 0, 从 上 式 可 见 


4.4 Markov 链 的 极限 定理 与 平稳 分 布 105 











#&— A = GB — k= Lan 
q 
P 


ñ= = iin- |F) h 


hfa = fafa = ($) n 
fn— fa = fa fn=s} = (2) s 


将 前 i 一 1 个 方程 相 加 得 
fi—fi= Aap) + alp +: + (q/ p)! ] 





即 
] = Ka bp) > 
ifi» q/p= 1 
利用 fn 三 1 得 
1— (q/p) 
| p 172 
1/N, p=1/2 
1 — (q/ p 
因此 ， f= IE PAL 


注意 到 ,N 一 十 ce 时 ， 
l— (a/p); p 172 
ass | 0， p <1⁄2 
因此 由 概率 的 连续 性 知 ,在 与 有 无 穷 赌 本 的 对 手 的 赌博 中 , 当 户 二 1/2 BW , W 4& 
的 赌 本 以 一 正 概率 趋 于 无 穷 ,而 当 户 过 1/2 时 ,将 以 概率 1 输 光 . 


4.4 Markov 链 的 极限 定理 与 平稳 分 布 


本 节 主 要 对 py” 的 极限 考虑 如 下 几 个 问题 :一 是 当 n 一 十 吕 时 ,py? 的 极限 是 否 


(k) 


FEIERTE m = lim pi” 是否 与 初始 状态 i 有 关 ? 若 不 存在 , lim 二 之 :Ee 


否 存 在 ?是 否 与 初始 状态 i 有关? 这 就 与 马尔 可 夫 链 的 所 谓 平 稳 分 布 有 密切 关系 . 三 
是 对 于 Markov 链 , 中 心 极限 定理 和 强大 数 定律 是 否 成 立 ? 
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4. 4.1 pg? 的 极限 性 质 


首先 来 看 两 个 例子 . 
【 例 4.19] 设 Markov 链 的 转移 概率 矩阵 为 
o -p b 
P= [ . A= “ba 


试 计算 lim pP Vij € I 
Ñ n T pi AERP” =P HAR, AH, REH H limp. 根据 线性 代数 的 
Ao, E FE P TADA 
P = QDQ ' 
其 中 


从 而 
1 0 n 
P = (po ">" =o | Jo 
0 1—p—q 
gter = p= Q) Pb =e p CL -— p — gy 
bP +q P TQ 
q=Pb (1=>p=4" ptp- fd 
b +q PpP +q 
由 于 |1 一 pp 一 g | 二 1, 所 以 上 式 的 极限 为 


q P 
bP+q pa 
q 








lim P” = 
Hej b 
PFPE PP lq 
可 以 看 出 xz; = lim p” 存在 ,上 且 与 初始 状态 i 无 关 , 只 与 状态 j 有关. 
【 例 4.20】 考虑 简单 随机 游 动 , 转 移 概 率 可 以 写 为 
Pim = 1 — pim = P 
容易 证 明 





2 n 


n 
n nn 
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当 思 一 计时 ,0 是 非常 返 状态 , 且 有 


(xX) 
im 
Pr n>too nn 
当 思 一 去 时 ,0 是 零 常 返 状态 , 且 有 
(x+ x+) 
lim po” = ese: lim A 2 2y 一 0 
ass pa, n—+°ə nT 
由 此 可 以 看 出 ,无 论 状态 0 是 非常 返 状态 还 是 零 常 返 状态 ,都 有 lim pp = 0. 


事实 上 ,这 个 结论 是 具有 普遍 意义 的 . 
。 定理 4. 12 若 状 态 j 是 非常 返 或 零 常 返 状 2 


| map SOVIET 
证 明 ”由 公式 





p? = 2 pero 
XN <xn £ 


n 

D p D) (D É p 
21 2 < Pp PEDA 
i=] 


t= N+1 


先 固定 N, noto NF aP 二 0 所 以 上 趟 右 端 第 一 项 趋 于 0. 再 令 N — 
十 ce, 上 式 右 端的 第 二 项 因 > f < 1 而 趋 于 0, 故 


lim py” = 0 


n> 二 oo 








。 定理 4.13 ENSI 


WRA i X, 三 j, 以 NN;(z) 记 到 时 刻 1 为 止 转移 到 j 的 次 数 . 由 于 7 是 常 返 态 ， 
则 一 旦 转移 到 jj ,在 概率 上 就 重新 开始 . UN, O ,ti > 0) 是 一 个 到 达 时 间 间 隔 分 布 
HIP on > 1) 的 更 新 过 程 . 从 而 
py = PIX, =j| X, = j} 
H Blackwell 更 新 定理 有 ， 


lI 


P E nd 处 更 新 } 


d) — 


lim Pi 
推论 4.3 设 i 是 常 返 状态 , 则 


d 
Li 
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m+ 


证 明 ”车 ;为 零 常 返 状态 , 则 An 一 十 ce, 从 而 lim p” = 0. fi 4 n RE d 的 整 
数 们 时 ,px” = 0. 故 lim p; = 0. 
反 过 来 , 若 lim pP 二 0, 且 i 是 正常 返 状 态 , M u < 十 ,根据 定理 可 知 ， 


lim p = £ — 0, ik iSlimpt% = 0 FA. 
n+x Hi n— o 


推论 4.4 EOE) 常 返 是 类 的 性 质 . 
证 明 i c; 为 常 返 状态 , 且 i 为 零 常 返 状态 , 则 
pP 一 0 
HFE nom 使 得 8 > 0, 加 ”> 0. H CK 方程 得 
p Z pP PI p Z 0 
令 ! 一 十 ce ,对 上 式 取 极 限 得 
0 limpi = 0 

Hj 也 为 零 常 返 状态 . 

反之 ,由 7 为 零 常 返 状 态 也 可 推出 ; 为 零 常 返 状 态 , 即 证 明了 ;7 同 为 零 常 返 或 
正常 返 态 . 

推论 4.5 ”有 限 状态 的 Markov 链 ,不 可 能 全 为 非常 返 状 态 , 也 不 可 能 有 零 党 
返 状 态 , 从 而 不 可 约 的 有 限 状态 的 Markov 链 是 正常 返 的 . 

证 明 设 状 态 空间 IT = {1,2,…,N}), 若 全 部 状态 为 非常 返 状 态 , 对 状态 ;一 )， 


N 
有 py” 一 0. 车 i 不 可 达 j , 则 对 任意 nn,py” = 0. ËJ k, `4 n> co BF ,# lim >p 
n> x P= 1 


: ED -iFĒ. 

推论 4.6 # Markov 链 有 _ 个 零 常 返 状态 , 则 必 有 无 限 个 零 常 返 状态 

证 明 ”车 1 中 有 零 常 返 状态 , 设 为 i, 令 C 为 所 有 与 ; 互通 的 状态 的 集合 , 则 由 
Markov 链 的 状态 分 解 定理 可 知 ,C 是 一 个 封闭 子 集 ,对 任意 ,了 1p” 一 1. 对 于 C 
中 的 任意 状态 j, 也 是 零 常 返 状态 ,所 以 和 


lim pP = 0 
1 十 ca 


从 而 
lim Dp == 0 
n> 十 ° ec 

5ŅpP = 128. 

JEC 


定理 4. 13 的 结论 给 出 了 非常 返 状态 或 零 常 返 状态 的 渐 近 分 布 ,但 是 当 j 是 正 
常 返 状态 时 ,lim pP 不 一 定 存在 ,即使 存在 也 可 能 与 ;有 关 . 因此 ,下 面 借助 于 研究 
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p” (d > 1) 和 一 LS 的 极限 性 质 , 来 讨论 j 是 正常 返 状态 时 lim pi 的 性 态 . 


S f, (7) = on ,0 过 7 达 d 一 1 表示 从 状态 i 出 发 ,在 时 刻 n 二 rmod(d) 


首次 达到 状态 j 的 概率 ,显然 


pid= = SS r) — =D = 


r= 0 m=0 r=0 


定理 4.14 ” 若 j 是 正常 返 状态 , 且 周 期 为 4, 则 对 任意 i 及 0 二 


1 
有 


lim py”? = f, (r) d 
n: ° j 
证 明 AKH nÆ kd 时 , pj” 一 0, 所 以 
nd+r n 
pge 2 — = 2 fp Chr = Df 
m=0 
FE, XH ISN <n 


m=0 


n 
Jae ) H m)d < p an == CSS. r) pb md 十 A 
> ; > I ij 


m=0 m=N+1 


在 上 式 中 , 先 令 n>+t o, HS N 一 十 co, 由 定理 4. 13 得 





f; Gy Ë. < m pi*to < fy 2 
j mere 


Ki 
故 lim p? = fy Cr) £ 
neta fi 
推论 4.7 设 不 可 约 的 、 正 常 返 的 .周期 为 4 的 Markov 链 ,其 状态 空间 为 1, 则 
对 任何 状态 i 一 j,j EI 有 


2 车 i 与 ; 同属 于 子 集 厂 
¿Sos P. 


0， 其 他 
JERI =U .特别 地 , 当 d — 1 时 , 则 Vi,j ET 有 


1 
É; 
文 是 不 可 约 的 、 正 常 返 的 .周期 d = 1 的 Markov 链 的 直观 含义 . 
证 明 ”在 定理 4.14 中 取 x 一 0 得 


lim pi” = 


n— += 


lim py” = f, 0) Š d 


n= 


其 中 方 (0) = Arg”. 


m=0 


车 i 与 j 不 在 同一 个 I 中, 则 由 定理 知 ,p98 = 0, 从 而 f = 0, E f, = 0 
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# ;与 7 在 同一 个 1 中, 则 当 不 是 4 的 整数 倍 时 ,p9? = 0, f 一 0, 因 
此 有 
Kot = = 2170 = Je s= 1 


虽然 一 般 情 况 下 ,lim pg 不 一 定 存在 ,但 是 可 以 得 到 平均 值 im 上 上 >) pp 的 
极限 定理 ， 





o J 为 非常 运 状态 或 党 这 状态 


证 明 ”借助 下 面 的 结论 :假设 有 非 负 数列 {a,) 的 d 个 子 列 {aw,),s 二 0,1,…， 
d—1 ,如 果 对 每 一 个 s 存在 极限 lim aws, = b. WE 


. Í SE 
i A 1. 


# j 是 非常 返 或 零 常 返 状态 ,由 定理 4.12 知 Jim pw 一 0, 所 以 


lim 15) = 
# j 2 E £ i RS B .J8] 29 d , WS aun = pW ,然后 利用 定理 4.14 得 5. = 
noS, 由 上 述 结论 可 知 


d—1 
lim Tp Tn eo 4 L 3 ta = £ 


Ë; s==0 


推论 4.8 ”如 果 {X,) 是 不 可 约 的 . 常 返 状态 的 Markov 能 , 则 对 任意 状态 iaj 
EI 有 


定理 4.15 及 推论 4. 8 指出 ,7 为 正常 返 状态 时 ,lim p 不 一 定 存在 ,但 是 lim 
1 519 是 存在 的 , 当 马 氏 链 不 可 约 时 ,其 极限 与 ;无关 


注 :本 小 节 研 究 当 n 一 十 co 时 转移 概率 py? 的 极限 性 质 , 即 研究 PIX, = 
jX. = iy 的 极限 分 布 ,主要 包含 两 个 问题 ,一 是 lim py" 是 否 存在 ?二 是 若 存在 ， 
Ji p 是 否 与 初始 状态 i 有 关 ?在 马 氏 链 理 论 中 ,这 一 类 问题 的 定理 统称 为 遍历 性 
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定理 . 研究 转移 概率 py? 的 遍历 性 给 解决 实际 问题 带 来 了 许多 方便 . 

若 对 于 ij € 了 ,存在 不 依赖 于 i 的 极限 lim p? = p, > 0, 则 称 齐 次 马 氏 链 具 
有 遍历 性 一 个 不 可 约 的 齐 次 马 氏 链 , 若 它 的 状态 是 非 周期 正常 返 状态 , 则 这 个 状 
态 就 具有 遍历 性 , 从 而 它 是 一 个 遍历 链 . 具有 遍历 性 的 马 氏 链 , 无 论 系统 从 哪个 状 
态 出 发 , 当 转移 的 步 数 ”充分 大 时 ,转移 到 状态 j 的 概率 都 近似 于 pi. 在 实际 运用 
中 , 当 充分 大 时 ,可 以 用 p, MEW pÍ 093408. 


4.4.2 平稳 分 布 与 极限 分 布 


我 们 知道 ,判别 一 个 不 可 约 的 、 非 周期 的 . 常 返 态 的 马尔 可 夫 链 是 否 为 遍历 的 ， 
可 以 通过 讨论 lim ps” 来 解决 .但 是 ， 在 实际 问题 中 求 lim ps” 是 比较 困难 的 ,所 以 ， 


通常 借助 于 研究 马 氏 链 的 平稳 分 布 是 否 存在 ， 来 判别 齐 次 马尔 可 夫 链 是 否 为 这 
历 链 . 


定义 4. 13 一 个 定义 在 状态 空间 上 的 概率 
马 民 链 的 平稳 分 布 ， 如 有 一 aP, 妈 o L 有 — 





平稳 分 布 也 称 为 马 氏 链 的 不 变 概率 测度 . 对 于 一 个 平稳 分 布 m TRA 
m = aP = aP? = -e = nP” 

注 :理解 “平稳 ” anon Pauia Syur, = 
0) 的 平稳 分 布 , 对 每 一 个 都 有 了 P{Xo = k) = zi; 则 对 一 切 n 宇 1, 有 PX, = k) 
= m, HIER EX n RIRE jev = 0,1,…, # 

P{X = j0 Lvl} = PIX, = j0 Lv) 
定理 4.16,, 设 {1%,,7 字 0 是 一 BRE MX, n >= 平稳 过 程 的 充分 必 

要 条 件 是 x(0) = {x,(0) ,i € D 是 平稳 分 布 , 即 有 x(0) = rl 

证 明 ”充分 性 : 记 rO) Ar WA 

Ax(1)= z(O)P = zx 
z(2) = zm(1)P = rO) P = x 












aln) = z(n— P = = = x 
因此 ,对 于 Vi € Lu € N,n2> 1,1 < k < n,: € N,# 
P iX, = z X, == iz s**t X, = 1 = mi DPRD e pl he 
= z(t + tpi ee pli a) 
= PlXin = is Xyu = izt, X, u = in} 
WAX, on > 0) 是 严 平稳 过 JEL 
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必要 性 :由 于 {X,,n > 0) 是 平稳 过 程 ,因此 有 
aln) = m(n — 1) = = = x(0) 





MH z(1) = x(0)P 得 
x(0) = z(0)P 


即 z(0) 是 平稳 分 布 . 
由 定义 4.13 和 定理 4. 14 不 难得 到 如 下 结果 : 


定理 4.17 不 可 约 的 遍历 马尔 可 夫 链 恒 有 唯一 的 平稳 分 布 |= = -iE I. 
B x = limpi. 
定义 4.14” 若 limxj(n) = lim PIX, =j} = z? j ET 存在 , 则 称 x” = 
7 十 co TY” 十 cc 
(iono ne) 为 马 氏 链 的 极限 分 布 
定理 4.18 不 可 约 的 \ 非 周期 的 马尔 可 夫 链 是 正常 返 状态 的 充分 必要 条 件 
是 它 存在 平稳 分 布 , 且 此 平稳 分 布 就 是 极限 分 布 { 二 ,7 EI). 


证 明 充分 性 : 设 存在 平稳 分 布 z = {mi sm ,1 由 此 有 
z = nP = 7P’ = = z P" 





即 
= Srp P 
s€ 1 
HT z, 20, EID r = 1. 
J€ 1 
由 控制 收敛 定理 ,有 
而 一 lim >z p = >x; lim p = ( mj = 1 
se El E E iET Ki Ki 
因为 
= > L 
于 是 至 少 存在 一 个 x = ` > 0, 从 而 
l 
1 


lim pr” = — > Ü 
n— + = AL 


MA u <+ so, 1 为 正常 返 状态 . 由 不 可 约 性 可 知 ,整个 马尔 可 夫 链 是 正常 返 的 ， 
且 有 


zm; 一 A >0.jEl 
必要 性 :由 于 马尔 可 夫 链 是 正常 返 非 周期 链 , 即 为 遍历 马尔 可 夫 链 ,由 以 上 的 
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定理 立即 可 得 结果 , 且 有 
Z; 一 m; = k 2 1 
m 


由 此 定理 可 知 ,对 于 不 可 约 的 遍历 马尔 可 夫 链 ,其 极限 分 布 x”== z FE HR 


是 等 于 平稳 分 布 . 
【 例 4.21】 设 马 尔 可 夫 链 的 状态 空间 为 二 (0,1,2), A — J 3: 45 8. # 3 
阵 为 
0.5 0.4 0.1 
P= |0.3 0.4 0.3 
0.2 0.3 0.5 
求 其 相应 的 极限 分 布 . 


E i LRR 2 fh m = (mmm), Rq m = NP 得 方程 组 
0. 5mo + 0. 3ri + 0. 2m2: = mo 
0. 4ro +0. 4m, +0. 3m = m 
0. Imo +0. 3m +0. 5m: = m 
m 十 ri 十 rs 一] 
解 方程 组 ,得 m 一 21/62,ri 一 23/62,xs = 18/62. 即 不 论 其 初始 分 布 如 何 , 在 
经 过 一 段 时 间 以 后 ,有 21/62 的 时 间 过 程 处 于 状态 0, 有 23/62 的 时 间 过 程 处 于 状态 
1, 有 18/62 的 时 间 过 程 处 于 状态 2. 
【 例 4.22】 设 马尔 可 夫 链 的 状态 空间 为 工 一 {1,2,3,4) ,其 转移 概率 矩阵 为 
l 0 0 0 


-| 1 0 O 
1⁄3 2/3 0 0 
1⁄4 1⁄4 0 1⁄2 


讨论 lim pP. 


解 状态 1 和 状态 2 都 是 吸收 态 ,都 是 正常 返 非 周期 的 基本 常 返 闭 集 , 而 N = 
(3.4) 是 非常 返 集 ,有 
piP = 1,p = 0,p% = 1/3 


pe = Dre- pr” n DP 
1=1 
= 二 . 十 . . 十 ... + 


说 明 lim pi 存在 ,但 与 i 有关 . 
【 例 4.23] 设 一 马尔 可 夫 链 的 转移 概率 矩阵 为 
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讨论 此 马尔 可 夫 链 的 遍历 性 . 
解 因为 


12 0 1⁄2 0 
0 17/2 0 1/2 
3 n ABAP = P'2 所 以 ,对 任 一 国定 的 状态 ;G = 1,2,3,4) ,极限 
lim p” 都 不 存在 . 故此 马尔 可 夫 链 不 具有 遍历 性 . 


J A 4 


fk 


, 独立 地 重复 抛 稀 一 枚 硬币 ,每 次 抛掷 出 现 正面 的 概率 为 力 对 于 nn 宇 2, 令 XX, 二 0,1， 
2,3, 这 些 值 分 别 对 应 于 第 nn 一 1 次 和 第 妹 次 抛掷 的 结果 为 ( 正 , 正 ),( 正 , 反 ),( 反 ， 
正 ),( 反 , 反 ). 求 马尔 可 夫 链 {X,,n 二 0,1,2,…) 的 一 步 和 两 步 转 移 概率 矩阵 . 

2. 设 {X(t),t € T) 为 随机 过 程 , 且 

X, = Xt), X: = Xt), X, = XG.) ,ee 
为 独立 同 分 布 随机 变量 序列 , 令 
Y, = 0,Y, = Y) = X, ,Y, teY, = X,,n > 2 
IE: (Y,,n > 0) 是 马尔 可 夫 链 . 

. 设 今日 有 雨 且 明日 也 有 雨 的 概率 为 0.7, 今 日 无 雨 而 明日 有 雨 的 概率 为 0.5. 求 
星期 一 有 十 ,星期 三 也 有 雨 的 概率 . 

4. 已 知 随机 游 动 的 转移 概率 矩阵 为 


CD 


P= O 05 0.5 
05 0 0.5 
求 其 三 步 转移 概率 和 矩阵 P 及 初始 分 布 为 

P(Xo = 1) = PIX, = 2} =0,P(X, =3) =1 
时 ,经 三 步 转移 后 处 于 状态 3 的 概率 . 
5. 已 知 本 月 销售 状态 的 初始 分 布 和 转移 概率 矩阵 分 别 如 下 : 

0.8 0.1 0.1 

(1)P!1(0) = (0.4,0.2,0.4),P = |0.1 0.7 0.2 


10.2 0.2 0.6 





0.5 0.5 b 





0.7 01 01 0.1 
(2)PT(0) = (0. 2,0.2,0.3,0.3),P = 01 06 0.2 VF 
01 01l 0.6 0,2 
Ol Ol 02 06 


求 接 下 来 一 个 月 、 两 个 月 的 销售 状态 分 布 . 
6. 讨论 下 列 转 移 概 率 矩 阵 的 马尔 可 夫 链 的 状态 分 类 . 
02 03 0S -Q 0 








0.7 03 “9 0 0 
(P= | 0 1 0 0 0 |; 
0 0 0 0.4 0.6 
0 0 0 ] 0 
0 0 1 0 
(2)P = > 人 s. ; 
03 和 7 0 0 
06 02 0.2 0 
1 O 0 
q r p 0 
a SU f pO ; 
0 0 q r $ 
0 0 1 


#iEq+r+p=1,I1= {0,1,…,n}). 
7. 设 马尔 可 夫 链 的 状态 空间 为 了 一 (1,2,…,7}, 转 移 概率 矩阵 为 
04 02 0.1 0 01 01 9.1 





0.1 03 02 02 0 01 0 
0 0 0.6 04 0 0 0 
P= | 0 0 04 0 06 O 0 
0 0 02 05 03 0 0 
0 0 0 0 0 VB 07 
0 0 0 0 0 0.8 0.2 


求 状态 的 分 布 及 各 常 返 闭 集 的 平稳 分 布 . 
8. 设 马 尔 可 夫 链 的 转移 概率 矩阵 为 
1/3 ait bo q: 


i 
q U zs | 


a [ 
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计算 AP f n = 1,2,3. 
9. 设 马尔 可 夫 链 的 转移 概率 矩阵 为 
ò t 6 


10. 将 2 个 红 球 4 个 和 白 球 任意 地 分 别 放 入 甲乙 两 个 盒子 中 ,每 个 盒子 放 3 个 . 现 从 每 
个 盒子 中 各 取 一 球 , 交 换 后 放 回 盒子 中 ( 甲 盒 内 取出 的 球 放 入 乙 盒 中 , 乙 盒 内 取 
出 的 球 放 入 甲 盒 中 ). 以 XO) 记 第 却 次 交换 后 甲 盒 中 的 红 球 数 , 则 {X(Cz) ,mm > 
0} 为 一 齐 次 马尔 可 夫 链 , 试 求 : 
(1) 一 步 转移 概率 矩阵 ; 
(2) 证 明 {X(n),n > 0) 是 遍历 链 ; 
(3) R lim P ,j = 0,1,2. 


= 
ji 


. 转移 矩阵 称 为 双 随 机 的 , 若 对 一 切记 >Vp = 1. 设 一 个 双 随 机 转移 矩阵 的 马 氏 
链 有 nn 个 状态 ,上 且 是 遍历 的 , 求 它 的 极限 概率 . 
12. 设 {X(n),n 宇 1}) 为 非 周期 不 可 约 马 尔 可 夫 链 ,状态 空间 为 I, 若 对 一 切 j € I, E 
一 步 转 移 概率 矩阵 满足 条 件 : > pi 一 1, 试 证 : 
(1) 对 一 切 j ,了 ps 二 1; 

i€ l 
(2) 若 状态 空间 工 王 {1,2,…,m}) ,计算 各 状态 的 平均 返回 时 间 . 
. 设 河流 每 天 的 BOD( 生 物耗 氧 量 ) 浓度 为 齐 次 马 氏 链 , 状 态 空 间 I= {1,2,3,4} 
是 按 BOD 浓度 为 极 低 、 低 、 中 、 高 分 别 表示 的 ,其 一 步 转 移 概 率 和 矩阵 (以 1d 天 为 
单位 ) 为 


1 


CD 


0.5 0.4 0.1 0 
0.2 0.5 0.2 0.1 
0.1 0.2 0.6 0.1 
0 0.2 0.4 0.4 

# BOD 浓度 为 高 , 则 称 河流 处 于 污染 状态 . 

(1) 证 明 该 马 氏 链 是 遍历 的 ; 

(2) 求 该 马 氏 链 的 平稳 分 布 ; 

(3) 河流 再 次 达到 污染 的 平均 时 间 pa. 


P= 
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51 和 连续 时 间 了 马尔 可 夫 链 的 概念 


定义 5.1 RX= (XG), Z 0) 是 取 值 于 状态 空间 1 的 随机 过 程 ,1 是 有 
限 或 无 限 可 列 的 ,如 果 对 于 任意 的 正 整数 ,任意 的 0 过 4 < < <t < bala 
及 任意 的 状态 215225 de bay € T, 均 有 
PIX m) = ¿a | XH) = iX) = r XG.) = in) 
S PIXOS ¿1 XG) 
则 称 {X(2) = 0) 是 连续 时 间 的 Markov 链 , 也 称 时 间 连 续 、 状 态 离散 的 Markov 
过 程 或 可 数 状态 的 Markov 过 程 . x 
对 于 连续 时 间 的 Markov 链 , 有 
PiX = p| CIEE gÇ) = P4 XU) = ;| XG = z) p = pain é S 
记 
Dy Gb ke) APX = ¿| XG.) = i) 
称 此 条 件 概 率 为 连续 时 间 的 Markov 链 的 转移 概率 . 
显然 有 
m sta) 0 


Dpr Gpe == li El 


EI 
如 果 py C sta) AATE t= ta — t, 的 函数 ,而 与 和 ts 的 值 无 关 , 则 称 此 连 
续 时 间 的 Markov 链 为 齐 次 的 或 者 时 齐 的 ， 
定理 5.1 连续 时 间 的 齐 次 Markov 链 的 转移 概率 p) 满足 如 下 性 质 : 
py t) r py tist) Aa PiX Ct) = / NG) 1) 22 —= fs: srl) 
(Dp (0) = 0,27 € 1,12 0; 


(2) Xip) = 1, € L 0; 
PEF 
(3) 连续 时 间 的 齐 次 Markov 链 的 C-K 方程 为 
prt r= Ypap GE TE Oc 0) 


kET 
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证 明 ”由 转移 概率 的 定义 可 知 ,性 质 (1) 和 (2) 显然 成 立 . 下 面 只 证 (3 ) : 
由 全 概率 公式 及 马尔 可 夫 性 得 
b; (+z) = PIXG +z) = ;|X0(0) = i} 
= >)P(XG 十 r) = j,XG) = k|X(0) = i) 


人 ET 


= DP{X() 一 有 |X(CO) 一 让 P{XG 二 rzr) = j| XG) = k} 


k€ 1 


= >)P{X(CD) 一 人 |XCO) = ;i)P(XG) =j|X(0) = k} 
k€ 了 


= D pa ps (e) 
kEI 


定义 5.2 ， 称 一 个 连续 时 间 的 Markov 链 是 正则 的 , 若 它 以 概率 1 在 任意 有 
限 长 的 时 间 内 转移 的 次 数 是 有 限 的 ， 
一 般 地 ,对 于 转移 概率 pi (7) ,假定 它 满足 如 下 的 正则 条 件 ( 或 连续 性 条 件 ): 
1, i=j 
0, iZj 
本 节 恒 假定 Markov 链 满足 正则 条 件 . 正则 条 件 说 明 ,过程 刚 进入 某 个 状态 不 
可 能 立即 又 跳跃 到 另 一 个 状态 . 这 正好 说 明 一 个 物理 系统 要 在 有 限时 间 内 发 生 无 
限 多 次 跳跃 ,从 而 消耗 无 穷 多 的 能 量 是 不 可 能 的 . 
下 面 主 要 讨论 连续 时 间 的 齐 次 Markov 链 . 
定理 5.2 R(X). > 0) 是 连续 时 间 的 Markov 链 ,假定 时 刻 0 过 程 刚刚 
到 达 ;G € S). 以 记过 程 在 离开 ; 之 前 在 i 停留 的 时 间 ; 则 = 服从 指数 分 布 . 
证 明 ”只 需 证 明 对 s,t > 0, 有 
P(z > s+t | = > s) = Pin > t) 


limp; (1) = ë, = 


即 无 记忆 性 . 

注意 到 

(z > s)ee(XG) = i,0< u < s| X0) = i} 
(z > s+ OO{X(u) = ¿,0< u < s+¿| X(0) = i} 
则 
Pla >s+t | z >$) 
P(X) =i,0<u=< s+t| X(u) = ;,0 < u < s) 
P{X(u) =i,s<u< s+t | X(s) = i} 
P{X(u) =¿i,0<u=< ¿| X(0) = i} 
= P (z; > t; 

其 中 第 三 个 等 式 利用 马 氏 性 ,第 四 个 等 式 利 用 时 齐 性 . 

上 上 述 定 理 说 明 ,连续 时 间 的 Markov 链 具 有 如 下 两 条 性 质 : 


lI 
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(1) 在 转移 到 下 一 个 状态 之 前 ,处 于 状态 i 的 时 间 服 从 参数 为 w; 的 指数 分 布 . 
(2) 在 过 程 离开 状态 i 时 ,将 以 概率 p, 到 达 j, 且 2)ps = 1. 


J€S 
定义 5.3 #u 二 十 co， 则 它 在 状态 i 停留 的 平均 时 间 为 0， 即 一 旦 进入 马上 离 
开 , 称 i 是 局 过 的 . 若 对 任意 i,0 < eh 链 不 存在 瞬 过 状态 . 
KAJ S.i ” 试 证 明 泊 松 过 程 {XX(1) > 0) 为 连续 时 间 的 齐 次 Markov ë. 
证 明 ” 先 证 泊 松 过 程 具有 蕊 尔 可 夫 性 ， pppn 
由 于 它 是 独立 增 量 过 程 , 且 XO =0, 4E h < t, < <t, < te 有 
P(XG 4) = ima |X) = i, XG) = ¿z | sss XG) = in? 
PIXG =X) = ¿a | XO = a XG.) N a) = S ea) 
PiX ma) — XG) = ¿a — i} 
又 因为 
PiX trad = ¿a XS š,) 
= P{X tm) — XG;,) = im — š, 
= P(X ta) — X) = imi — in} 
所 以 泊 松 过 程 具有 马尔 可 夫 性 ， 
下 面 再 证 齐 次 性 
X > i 时 ,由 泊 松 过 程 的 定义 得 
PIXG+D = ;|X() 一 让 一 PIXG 十 划一 X(C) = ;j—i) = e 








l 








— X(0)= i} 


n 








当 j 了 过 i 时 ,py(s,t) = pi;(t) = 0. 
即 转 移 概 率 只 与 上 上 有关，, 泊 … 松 


BRSi 对 章 次 马尔 可 夫 过 各 










ria ` 
。 对齐 次 马尔 





o 


不 加 证 明 地 给 出 绝对 概率 分 布 的 以 下 性 质 ， 
(1)p;(t) > 0; 
(2) >p GO = 1; 
i&l 
(3)p GO = JPO ps (2); 
iel 


(A pit = JPO pi C); 


i€1 
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(5)P4/IXCG,: ) = 11 sX (Cta) = iz ° X(t) = in? 
有 (Obs Cti ) bis, (zs = TA CE, nd 
icl 


5.2 RATAR- (Kolmogrov-Feller) 微分 方程 


定理 5.3 ” 设 齐 次 马尔 可 夫 过 程 满 足 正则 条 件 , 则 对 任意 固定 的 i,i EI= 
10. 1.2...) ;Dy (zh 的 一 致 连续 函数 . 
证 明 设 疡 之 0, 则 


b; th) — b, G) = D pa (h) py GO — pi (t) 
== 


= pi h) pi O — pi D + X pah) py 0) 


k= 


=— [1— b: Q)]b; G) + S pa h) py (D 
ki 


而 得 到 
b s t+h)— pit) >—[1— p, (h)]p; @) >— [1 — pb; (h) ] 


btth) — p; (t) < > Wp (1) < >p 0) = ] — pb; (h) 
k 
因此 得 到 
| b; t + h) — p; (t) |< 1 — p; (h) 
XF h< 0, 可 得 类 似 的 不 等 式 , 所 以 有 
|b; G h) p |< 1—p (| h|)— 0 (h—0 
即 p; 2) 是 + 的 一 致 连续 函数 . 


定理 5.4 Ra (D 是 齐 次 马尔 可 夫 过 程 的 转移 概率 ， 则 P, co) 具有 下 列 极 
RER: 


a) lim AW = q, LHi j; 


0 


(2) lim EL = gy ctoo, ii 


t0 


称 q, 为 从 状态 i 到 1 的 转移 速率 或 者 跳跃 强度 . 


证 明 ”参见 文献 [13]. 
定理 5.4 中 极限 的 概率 意义 表明 ,在 长 度 为 1 的 时 间 区 间 内 ,过 程 从 状态 i 转移 
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到 另 一 其 他 状态 的 转移 概率 1 一 p, G) 等 于 gq: 加 上 一 个 比 t 高 阶 的 无 穷 小 量 ;而 从 
状态 í 转移 到 状态 7 的 概率 pj; (z) 等 于 qs 加 上 一 个 比 t 高 阶 的 无 穷 小 量 . 
推论 5.1 对 有 限 状 态 时 齐 的 连续 时 间 Markov 链 , 有 


qi 一 >q <+ ce 
证 明 ”由 定理 5.1 知 , lp; GO = 1,Bl 
jEI 


1— pi(t) = J p0) 
Ji 


lim 1 ZAW L] in im) b; G) w =p lim pD E Slas zii 


t—0 =; 10 


注 :对 于 无 限 状 态 的 情况 ,一 般 只 能 得 到 q, — >q. 为 了 简单 起 见 , 设 状态 空 
间 I 为 {10,1,2,…) ,此 时 记 


qoo qoi do `° Qon 

Qo Qi Qu ° Qin 
0=|, + , j 

do Qa qe * Qm )¿Otl)X(mkE1) 


PKZ AI FEU 3 K PI < Pk FL 00 55 35 BE RIE WE , TER Q BE E. 当 和 矩阵 元 素 g; = yq, < 
十 ce 时 , 则 称 该 矩阵 是 保守 的 . 
由 于 对 ie T, 包 (0 在 :一 0 处 的 导数 ( 右 导数 ) 存在 , 即 lim O T q, = 


py(07), 所 以 Q 矩阵 也 称 为 转移 概率 矩阵 P C) 的 密度 矩阵 . 以 Q 为 密度 矩阵 的 马 
尔 可 夫 过 程 称 为 2 过 程 . 由 @ 矩阵 求 转移 概率 矩阵 PC) 的 问题 , 称 为 2 矩阵 问题 . 
Q 和 矩阵 反映 了 齐 次 马尔 可 夫 过 程 的 转移 概率 (函数 ) 在 := 0 处 的 变化 率 , 它 是 
一 个 常数 矩阵 ,而 转移 概率 矩阵 是 一 个 函数 矩阵 ,在 计算 上 ,Q@ 和 矩阵 较 转 移 概 率 矩 
阵 易于 获得 ,因而 给 解决 实际 问题 带 来 了 较 大 的 方便 . 
转移 速率 qi 具有 如 下 性 质 : 
(1)q, < 0,; = jsi j € I; 
(2)q;, Z 0, Z J+isj € I; 


(3) >q; = 0. 


jel 


对 任意 i€ I, FR 








— p, (0) = lim 


1 一 0 


存在 , 即 导数 存在 ,但 可 能 为 无 穷 大 . q, 的 取 值 决定 了 状态 的 性 质 . 
(1) 4 q, = O 时 ,p;(t) = 1(Vt 放 0), 表 明 系 统 从 i 出 发 不 发 生 转 移 , 称 状态 


] — p(t 
BD = qy <+ = 
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i 为 吸收 状态 . 
(2) 当 o = 二 ce 时 ,有 js 一 0(CVt 二 0), 表 明 系 统 从 ;出 发 经 任意 时 间 都 
不 回 到 i, 称 状 态 i 为 瞬时 状态 . 
(3) `4 0 < q, <+ BF ,0 < pit) < 1( V t — 0), 称 状态 ;为 逗留 状态 . 
ES rw) 表示 系统 一 直 停 留 在 出 发 状态 的 时 间 长 度 , 则 E[r(w)|X(0) = i] 
= 1/q; , 即 1/as 表示 停留 在 状态 i 的 平均 时 间 长 度 . 


Ki ro 程 












用 矩阵 表示 为 PCO) = POQ 

证 明 只 证 有 限 状态 情形 . 

H C-K 方程 有 

pi t+) = $ pa W py 0) 
或 等 价 地 su 
py (t+h) — b, (h) p; (t) = Pu W pu D 
变形 为 
bi (+h) 一 py(t) = D pa (h) py O) — [1 — pi (A) ]p; (2) 
于 是 s 
a s ll x x 

即 证 ps (2) = > qabu O — gaps (D. 


ki 
利用 p; t + h) = Dpa GO py (h) 同 理 可 证 向 前 方程 . 
AGE 了 
考虑 状态 有 限时 HS 
T:E) = (bo G) palt), ba (8) ) 
则 有 
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dż 


Ea = TQ = 0, 12n 
T;(0) <= (0,0,* 1, ,0) 


进一步 , 右 记 
To (O Poo (t) poi Ct) ese pon (t) 
Di (a) (z) (t) == nCt) 
PO i es Pae i pi i 
L(t) Bot Patt) < ba t) Jeans 
则 有 
dP) _ PDQ 





dt 
lai = L,+uxco+D 
此 即 为 Kolmogrov-Feller 向 前 方程 的 矩阵 形式 . 


若 记 
Poj Ct) 
ES) 
S0) = Pons 
b Ct) 
则 有 
dS) _ .— awi 
— SO, = 0,1,2, sn 
初始 条 件 为 
0 
S,(0)= |1 |G +1) 
0 
即 





| PCD = OPC) 
PO) = Lozan 
上 面 的 方程 组 即 为 Kolmogrov-Feller 向 后 方程 的 矩阵 形式 . 

Kolmogrov-Feller 微分 方程 主要 是 建立 了 齐 次 马尔 可 夫 过 程 的 Q 矩阵 与 转移 
概率 矩阵 P(i) 之 间 的 关系 . 若 给 定 了 密度 矩阵 8, 在 一 定 的 条 件 下 , 可 以 通过 
Kolmogrov-Feller 微分 方程 解 出 转移 概率 p; Q). 例如 ,如 果 Q 是 一 个 有 限 维和 矩阵 ， 
则 由 向 后 与 向 前 方程 可 以 求解 转移 概率 矩阵 P(z) 为 


124 第 5 章 连续 时 间 马 尔 可 夫 链 





PK = e =S (0 /;11 


定理 5 6 ， 齐 次 马尔 可 天 过 程 在 ;时 刻 处 于 状态 ) E 7 的 绝对 概率 2 O 满 

ETARE, oo 

Wo — 2O = g; bi (t) $ Sauti (D) 
a ; Z; 


证 明 ”由 齐 次 马尔 可 夫 过 程 绝 对 概率 分 布 的 性 质 有 
p G) = >p (0) ps (1) 
i€ 1 

将 Kolmogrov-Feller 向 前 微分 方程 两 边 同 乘 以 p (0) ,并 对 i 求 和 得 
2, (0) L G) = >) 510 Olya G) — >, (0) gp D 

iEl kj 

于 是 有 
的 (0 == q; p GQ) + aup 


与 第 4 章 讨论 离散 马尔 可 夫 链 类 似 , 不 加 证 明 地 给 出 连续 时 间 马 尔 可 夫 链 的 
转移 概率 p; (1) O 一 十 cc) 的 极限 分 布 与 平稳 分 布 的 有 关 性 质 . 
定义 5.5 i; z) 为 连续 时 间 马 尔 可 夫 链 的 转移 概率 , 若 存在 时 刻 与 和 
与, 使 得 p; (n) > 0, pa (a) > 0, 则 称 状态 i Mj 是 互通 的 . 若 所 有 状态 都 是 互通 
的 , 则 称 此 马尔 可 夫 链 为 不 可 约 的 . 

定理 5 7 REENA > O, pyh) PI 一 步 转移 概率 ， 则 xn 步 转 移 概率 为 
p9 A = py oh) 

(1) Bip; (1)} 是 非 周期 不 可 约 的 , 且 对 任意 :7 € 1, 下 列 极限 存在 且 与 i 
无 关 : 

lim pi (h) = Jim pi nh) = n; (h) 

即 
O; j 为 非常 返 或 零 常 返 


š (n) == 
mapasa j 为 遍历 态 
(2) (马尔 可 夫 定 理 ) 对 一 切 i,j € T, 下 列 极限 存在 且 与 i 无关 : 
lim p; (1) = x; 
[r+ 
(3) {zj sj € D 有 下 列 性 质 :m 宇 0, >)mi = 1, 对 任意 + 二 0 有 
JET 


= > TG D kj (t) 


k€ 1 


(4) 车 对 某 一 j € I £ x; 二 0, 则 对 一 切 i € LÄ ri > 0, H 
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2 m = l 2 mau = wq; € 1 


定理 5.8 ， 设 连续 时 间 马 尔 可 夫 链 是 不 可 约 的 , 则 存在 下 列 性 质 : 
Kl) = I 是 正常 返 态 的 |. M| lim py G) 存在 且 等 于 Nje Nj Da 0,j E T, 其 中 Tj 是 


方程 组 
D Ty 一 di j 


kZJ 


| 


gt 


的 唯一 非 负 解 ,此 时 称 {xj ,7 € I) 是 该 过 程 的 平稳 分 布 ， as 


lim p; G) = x; 


(2) 若 它 是 零 常 返 态 的 或 非常 返 态 的 , 则 
lim p; G) = lim p; (2) 0. La E I 


【 例 5. 2〗 (随机 信号 问题 ) 计 算 机 中 茶 个 触发 器 有 两 种 状态 , 记 为 “<0” 和 “1”, 
设 触 发 器 状态 的 变化 构成 一 个 齐 次 马尔 可 夫 过 程 {X(t),t € [0, 十 co)} ,TI 一 (10， 
1), 且 有 
boi (At) = AAt tT o(At) s pio (At) = pAt + o(At) 
求 矩 阵 @ 与 乙 (1). 
E AXO 表示 时 刻 上 触发 器 的 状态 , 则 
lim Pal At) — Bo _ 

















Tor = Pe At À 
ou = lim Pio At) — ôo _ 
Are 07 At 
qa, 二 一 tor == Aaga == Qi, == y 
= À 0 (1) 0 (t) 1 0 
T o= | JPO = fio Poi PO = [ $ 
“ 起 Polt) pii (t) 0 1 
由 Kolmogrov-Feller 向 前 方程 ,可 得 

dpa (DD =— Apoo (t) + upo (t) 

tpa tt = Apoo Ct) — ypo (t) 

dpo o =— àp n G) + ypnu (t) 

dpn t) 


dt = Abu (t) — up u Ct) 


Po (0) = pu (0) 二 l, pio (0) = poa (0) 一 0 
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解 上 面 的 线性 微分 方程 组 ,得 
bo (t) = po + hoe 2791, po (E) = Ao [1 — e ty | 
Polt) = [1 — et], pult) = A SS 


ES 
其 中 Ào Fg 各 1 +u 


【 例 5.3] (随机 游 动 问题 ) 质点 在 线段 [1,5] 上 作 随 机 游 动 , 且 只 能 停留 在 整 
数 点 上 . 质点 可 在 任何 时 刻 发 生 移动 ,移动 规则 是 : 

O 车 时 刻 t 质点 位 于 2,3,4 处 , 则 在 (zt 十 At) 内 右 移 一 格 的 概率 是 AAi 十 
OoCAL) , 左 移 一 格 的 概率 是 At 十 ol(At), 停留 在 原 处 的 概率 是 1 一 AAt O At 
+o(At); 

© 若 时 刻 上 质点 位 于 1 处 , 则 在 (it 十 At) 内 右 移 一 格 的 概率 是 At 十 o(Ai) , 停 
留 在 原 处 的 概率 是 1 一 AAt tolt); 

© 若 时 刻 上 质点 位 于 5 处 , 则 在 (tt 十 Al) 内 左 移 一 格 的 概率 是 At 十 o(AL)， 
停留 在 原 处 的 概率 是 1 一 jyAt 十 oC(At); 

@ 在 (tt 十 At) 内 发 生 其 他 移动 的 概率 都 是 At). 

RE pi (1) 满足 的 微分 方程 组 . 

解 按 移 动 规则 写 出 转移 概率 函数 

AAt +oCAt), j=i+1, 
At +olAt), j=i—l, 


Pi (At) = 41 — AAt — pAt + olt), j = i= 2,3,4 


o(At), 其 他 . 
由 极限 式 可 求 得 
À; 7 三 i 十 1， 
“° j= i— l; 
í l= =g; Y= 9 3 45 
0, 其 他 . 
AAt+o(At); j=2, Wr f= 
类 似 地 ,有 bu (At) "aaa, j= l, q S = As? =], 
olAt), 其 他 ， 0 其 他 ; 
AAL 十 oCAt)， J 一 4， AL， 了 一 4， 
= 
pacan mdi part oan, J=5 qj 5474 j=5, 
olAt), 其 他 ， 0, 其 他 . 


综合 上 述 结果 ,得 
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一 人 A 
ee T À 
Q = u = Q + n) A 
H = (A À 
a TA 
dP) _ dP) _ 
故 到 一 P(/)Q. L QP (t). 
1 
P(0) = 
1 


解 方程 组 即 得 转移 概率 函数 p; (2). 
【 例 5.4] 由 泊 松 过 程 定义 知 
bia A (Ag) = P(N(t + At) — NG(z) = 1 | NG) = i} = AAt + o(At) 
pb (At = P(NGt + At) — NC) = 0 | NCG) = i} = 1—AAt+ o(At) 
求 Kolmogrov-Feller 微分 方程 的 解 . 
E BA 





lim 1— pi At) = q; = À, lim Pi (At) _ 
At) At E At 


所 以 p'u 4) = qaa baa (E) — gaps(t) = Ap iy (t) — Ab; (tD. 

š j= it, A pu G) = Apit); 

3 j= i+lB,# pinna) = Apain E) 一 XApi (t); 

当 7 二 i 十 2 时 ,有 Pana G) = Àp imn, a (t); 

在 其 他 情形 下 ,微分 方程 不 存在 . 

由 条 件 p (0) = 1 得 微分 方程 的 解 为 

bi G) = e ,p(t) = Me 

(Ar)! : 
GÐ 

[5] 5.5] 设 有 参数 连续 、 状 态 离 散 的 马 氏 过 程 {(X(1),t > 0), 3 S Z J] 2 
I= {1,2， ,m} ,3 了 ij)iyj =1,2,… Mr 时 ,qi =1,gs =—(m—1),i=1,2,.， 
m, É pb; (t). 

解 ” 由 Kolmogrov-Feller 向 前 方程 得 

SP Ne (Ey H E pial) 


dt k=j,.k€ l 


Qi aa = À 





py G) = e Jj =i > 





Dpil) =1 


kET 
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可 知 
> pa. (D = 1— bi (t) 


kÆjkEl 


因此 ,有 


pen =—(m—1)p; G) +p =1— mp; (¿j = 1,2,*,m) 


解 此 微分 方程 ,得 
b; G) = ce™ += G a= haein 
利用 初始 条 件 
pO = irp (¿> p 
可 得 





Ppa t) = (1 l Je g l G = 1,2," ,m) 


pia = a-e wy Ajig = ,yd 
7 


5.3 生 灭 过 程 


本 节 主 要 介绍 在 实际 问题 中 使 用 较为 广泛 的 一 类 特殊 的 连续 时 间 马 尔 可 夫 链 
模型 , 即 生 灭 过 程 . 具体 定义 如 下 : 

定义 5.6 一 个 状态 空间 为 T= (0,1,2, J ,有 连续 参数 集 T — [0, + co) 
的 齐 次 马尔 可 夫 过 程 {X(C) ,会 0) ,如 果 它 的 密度 短 阵 为 


— À i i Ào ER 
2 s b a’ 
2 S a na 


| _ pin T A) E 








则 称 该 过 程 为 生 克 过程 其 中 心 PE 为 死亡 率 ， O 必 为 保守 阵 . 


生 灭 过 程 的 转移 概率 p; (1) 的 性 质 : 设 iE 了 ,对 充分 小 的 时 间 上 二 0, 有 
piin (£) = àt Hol), >o 
P.A A) = pt oC), pw = 0, > 0,12 1 
bpi) = 1 — (A; + pt tolt) 
£; C = oG), | ¿= j |> 2 
E à S= Asu = iu On ` F 20 OIJBR0X 02. > 0) 为 线性 生 灭 过 
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若 在 密度 和 矩阵 2 中 ,mw = 0G € I) , 则 群体 个 体 减 少 的 概率 为 零 , 称 为 纯 生 过 程 
(如 泊 松 过 程 ). 若 在 密度 矩阵 CQ 中 ,A = 0G € 也 , 则 群体 个 数 增 加 的 概率 为 零 , 称 
生 灭 过 程 的 概率 意义 可 作 如 下 解释 :由 生 灭 过 程 的 转移 概率 p; (i) 的 性 质 可 
知 , 如 果 和 忽略 + 的 高 阶 无 穷 小 量 , 生 灭 过 程 即 种 群 群体 的 状态 变化 有 以 下 三 种 可 能 : 
d) 由 状态 i 一 i 十 1, 即 增加 了 一 个 个 体 , 概 率 是 At; 
(2) 由 状态 i 一 i 一 1, 即 减少 了 一 个 个 体 ,概率 是 jt; 
(3)i — i, 即 群体 个 数 无 变化 . 
由 此 可 以 得 出 , 生 灭 过 程 的 所 有 状态 是 互通 的 ,但 在 充分 小 的 时 间 内 ,只 能 在 
两 个 相 邻 状态 内 变化 ,或 者 状态 无 变化 . 
类 似 于 5.2 节 的 推导 过 程 ,可 得 到 生 灭 过 程 的 柯 尔 莫 哥 洛 夫 - 费 勒 微分 方程 和 
平稳 分 布 的 相关 结果 如 下 : 
1. 生 灭 过 程 的 柯 尔 莫 哥 洛 夫 - 费 勒 微分 方程 
(1) 向 后 方程 是 
r (2) =— (u TAD py G) Hipmi D qipa; G) i> 1,; € I 
Py) =— A bi) Hipy) j € I 
(2) 向 前 方程 是 
的 y (2) =— pi Œ) Qy FAD F biji OA F Pia umoj 2 1,i € I 
P'o) =— polt)ào + patmi € I 
绝对 概率 有 如 下 方程 : 
pri =— b; (D) Gu FA pA pa DA 2 
Pa) =— b (DA + pi (t) 
2. 生 灭 过 程 的 平稳 分 布 
和 入 ttt Àn =] 
m — (mima tt sms) m = (2+ > L 
= Ao À1 °°" An1 
在 级 数 1+ Dy OAR 收 全 的 条 件 下 ,以 O D B BE E RE 03 E X Efe TE PA 
分 布 . 由 lim 户 (一 mi E IR% t RIKE, pi O ~ wj. 进一步 得 到 生 灭 过 
程 存在 唯一 平稳 分 布 的 充 要 条 件 : 
定理 5.9” 设 {X(2),t 宇 0} 为 一生 灭 过 程 ,其 中 义 >0(i>0),p>00> 
1), = 0, NJ XG) 2. 0) e 0 Ë ` 的 平稳 分 布 ( 它 就 等 于 极限 分 布 ) ITR 
件 为 


ro n = 1,2,=°° 


S Ao Àr À, ETS 
a shi 
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【 例 5. 6〗 (电话 问题 的 爱 尔 朗 (Erlang) AR) 某 交 换 台 有 条 中 继 线 ,区 内 用 
户 与 区 外 用 户 通话 要 通过 中 继 线 . 由 于 用 户 数量 很 大 ,可 以 认为 不 管 占用 了 几 条 中 
继 线 ,不 通话 的 用 户 数量 可 看 作 是 不 变 的 ,因此 ,假定 在 (tt 十 AL) 内 又 有 一 用 户 要 
同 区 外 通话 的 概率 是 AL 十 o(Ati) ,与 正在 通话 的 户 数 无 关 . 若 中 继 线 有 空 则 接 通 ， 
否则 用 户 的 要 求 被 取消 .而 在 时 刻 t 正 与 区 外 通话 的 用 户 能 在 (t,t 十 At) 内 结束 通 
话 , 从 而 空 出 一 条 中 继 线 的 概率 是 jvAt 十 o(AL). 设 各 用 户 与 区 外 通话 是 独立 的 , 若 
AXO ATRA t EEA PERAK U XAAS 是 齐 次 马尔 可 夫 过 程 ， 
求 其 平稳 分 布 并 导出 爱 尔 朗 公式 ， 

E 转移 概率 为 

baa (At) = AAt +HolAt), ¿= 0,1,-.,s—1 
Pa (At) = G At Holt), ¿i= 1,2,°,s 
ba At) = 1— Q +/a)At--o(A0D. i= 0,1l,-.,s—1 
ps (At) = 1 — su At + o( At) 
pa CAD = 0, | i= j |2:1 
ER XO 是 一 个 生 灭 过 程 . 
A 二 A，1 二 0,1,**,s 一 1 
P = ip, i= L, ysis 
JE -F4$2 A m= (mo mitt m) 为 


m = iaden, 一 站 (2) zo: k=1,2,%,s 
kl oa i 
S| 
于 是 ,得 到 爱 尔 朗 公式 
“Hl L Da 


【 例 5.7] ( 酶 的 产生 过 程 ) 设 有 大 量 的 实验 样品 ,每 个 样品 包含 一 个 酶 分 子 
和 母体 物质 . 若 在 (1,t 十 At) 内 形成 第 二 个 酶 分 子 的 样品 数 与 时 刻 上 未 形成 第 二 个 
酶 分 子 的 样品 数 成 正比 , 且 与 时 刻 上 无 关 . 任 一 包含 一 个 酶 分 子 的 样品 在 (tt 十 Ai) 
内 产生 第 二 个 酶 分 子 的 概率 为 At 十 o(Ali). 设 在 时 间 间 隔 At 内 增加 两 个 或 更 多 酶 
分 子 的 概率 是 o(At). 令 义 (1) 表示 时 刻 1 系统 中 的 酶 分 子 数 , 则 {XX(1) ,t 宇 0) 是 齐 
次 马尔 可 夫 过 程 ,证 明 :X(t) 是 纯 生 过 程 . 

证 明 转移 概率 为 

Piia (At) = AAt Holt), i 宇 0 
pi (At = 1— HAt +HolAt), i>0 
bi (At = o(At), ¿2>1 

b Ë (At) = olAt), |i—j|>1 
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由 此 可 以 得 出 
qia = À, i20, qi =— i, ¿i2>0, 
Qua 1 q =0, |i—j|>1l. 
所 以 X) 是 纯 生 过 程 . 

【 例 5.8】 (XG), € [0, 十 ce)} 是 一 个 有 线性 生殖 率 的 纯 生 过 程 , 若 
P{X(0) =k) = p A— p), BR XO 服从 参数 为 pp 的 几何 分 布 (k 宇 1), k 
E[X(t) ] # D[ X(:) J. 

解 BAXE), € [0, 十 oo0)) 是 纯 生 过 程 , 所 以 有 

E[XG + s) — X(s) | Xs) = m] = me*(l—e™*) 
D[ XG: +s) — X(s) | X(s) = m] = me (1 — e) 
D[XG +s) — X(s) | XC) = m] = E([XG +s) XOP | XG) = m) 
—(E[XG + s) — X(s) | X(s) = m]? 
由 此 得 出 
r. 
E[X(CD) — X(0)] = >)ELX(CD) — X(0) | X(0) = n]P(X(0) = n) 


n=0 


= Dne (1l—e*)p (1— p) 
n=1 


+c 


= ep(l—e*) on(l—p)"™ 


n=1 


l y ; 
Wf = Pat (Dey = s=) = 


T = së 


E[XG) — X(0)] = p'1ev(1— e) 





十 ca 


E XO > np (1 — p) asss p` 


n=] 
ECX) ] = pL d — e™) +1] = pe” 
DEX) ] = E[X Y ]— (E[ XG(:) ])2 


+œ +o 
= mC (F (et) mge 
m=] n=m 
[515.9] (M/M/S 排队 问题 ) ERARA s 48 3 #p $ G , E 2] t 3] i& 65 49 38 
数 N( 是 强度 为 的 泊 松 过 程 .到 达 时 车 有 空闲 船 台 , 立 即 进行 装卸 服务 ,否则 需 
排队 等 候 直 到 空 出 船 台 后 接受 服务 . 设 每 条 船 的 服务 时 间 丁 都 服从 负 指 数 分 布 , 即 
s ¿0 
Qs 上 从 
并 设 各 船 装 务 时 间 相 互 独立 , 且 与 N(1) 独立 .用 X() 表示 时 刻 t 进 港 的 货船 数 . 
(1) ER: (XOS 是 齐 次 马尔 可 夫 过 程 ; 


l— e~” 


P(T < t) = 
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(2) 证 明 :{X(1),t 宇 0) 是 一 个 生 灭 过 程 ; 

(3) 求 其 平稳 分 布 ; 

(4) 对 港口 的 装卸 进行 定量 分 析 . 

证 明 (1) 由 于 在 时 刻 1 港 内 的 货船 数 与 1 十 At 时 到 达 的 货船 数 是 相互 独立 的 
(因为 泊 松 分 布 的 独立 增 量 性 ) ,而 时 刻 t 正 在 装 印 的 货船 在 1 十 At 时 是 否 结束 服务 
也 与 该 船 在 时 刻 t 前 已 服务 的 时 间 无 关 ( 因 为 负 指 数 分 布 的 无 记忆 性 ), 所 以 X (t) 
是 一 个 马尔 可 夫 过 程 . 又 由 

P (X(+ A) = i | XW = i) 
= P(N(At) = 0,A(At) = 0 | X() = i} 


k=1 


= P(N(AD = 0, f) (T, > At | XW = i} +o(AD) 


_ [ee +o(At) = 1 AH ipat Holt), i<s 
u = +o) = 1— Q +sOAto(AD, >s 
类 似 地 ,有 
PI IXG-+ A) = ¿—1 | X@) = 2 
_ e“ (1 —e*¥) + o(A = yAti+o(At), 1<i<s 
u IQ —e w) o(At) = At Holt), i>s 
P(XG + At) =i+1| XŒ) = i} =AAt+ o(At),; > 0 
故 由 上 面 三 式 可 知 ,从 1 到 1 十 At 的 转移 概率 与 1 无关 ,过 程 是 齐 次 马尔 可 夫 过 程 . 


(2) 由 于 
,1p(At) /A+ix, i<s 
q; = lim 
Aro At à+ su» z; — s 
qini = À> z 之 0 
ip » ¿<s 
Qiii 一 n 
u, i>s 


gp =0; |i—j 2, 
所 以 ,X(t) 是 一 个 生 灭 过 程 . 
(3) 柯 尔 莫 哥 洛 夫 向 后 方程 为 
Pu = Q F ip) pi t) + inpas Q) + ap (t), 0<¿:=<s 
se A £ >s 
因为 4; = Asu = W ss 
Suy Ü 2 $ 


依 公式 可 得 
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k 
(4) 0< k < 
O Àoàit Àe _ k! 4 
pum 1 /à\f 1 
ri 0 Ë > s 


& 52 一 1 时 ,存在 平稳 分 布 .4 < su 就 是 单位 时 间 内 到 达 港 口 的 货船 平均 数 少 于 
H 
s AAE G L 3 #p 3 IE 3 60 P 35) EAE. 这 时 


š k tael 
E +> FF ) rp 问 ] 
将 rm 代入 m ， 即 得 平稳 分 布 m = (Croyriyrz，…)， 
(4) 讨论 :货船 到 港 无 须 等 待 的 概率 是 
a, = P{x(t) < s—1) = m +m Hee + xm— 
需 等 待 两 条 或 两 条 以 上 货船 装卸 完 的 概率 是 
a, = P{zx(2) < s+ 1) = 1 — (m +m + = + x;) 
在 港口 内 排队 等 候 的 货船 平均 数 是 


by = re 





在 港口 内 轮船 的 平均 数 是 


b, = Sie 
k=1 


MEJLA sdu 的 数值 得 一 数据 表 如 表 5.1 所 示 。 
表 5.1 数据 表 


























从 数据 表 可 知 , 若 人 相同 ,装卸 效率 提高 一 倍 , 则 货船 无 须 等 待 的 概率 可 由 0. 1 
提高 到 0. 55; 而 等 待 的 货船 平均 数 从 8. 1 条 减少 到 0. 37 2. 


5.4 马尔 可 夫 序 列 与 扩散 过 程 


本 市 仅 简单 地 介绍 马尔 可 夫 序 列 及 扩散 过 程 的 定义 和 统计 性 质 , 需 要 进一步 
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了 解 的 读者 请 阅读 更 专业 的 书籍 . 


5.4.1 马尔 可 夫 序 列 





则 称 — 为 马尔 可 夫 序 列 ， 它 是 时 间 参 数 离散 .状态 空间 连续 的 马尔 可 天 过 程 . x 
马尔 可 夫 序 列 同样 具有 “ 马 氏 性 ”, 即 已 知 “ 现 在 ”, 则 “将 来 ”与 “过 去 ”相互 
独立 ， 
Ca | z.) = f(x, | 2I fr, | 2 me rs 
马尔 可 夫 序 列 的 转移 概率 密度 方程 为 


十 cc 
f<, | x) =] Fers | z.) fir. | z dz. n >> z = $ 


”定义 5.8 ”如 果 一 个 维 向 量 随机 序列 (x(k),k € Ni ) 既 是 正 态 的 ,又 是 

马尔 可 夫 序 到 ， 则 称 之 为 正 态 (高 斯 )- 马尔 可 夫 序列 . 它们 的 由 
度 概率 分 布 ,而 马尔 可 夫 性 决定 了 序列 在 时 间 上 的 传播 规律 。 

设 高 斯 - 马尔 可 夫 序 列 为 X(n 十 1) = AX (n) +W(n) ,其 中 人 为 常数 ,多 Cn) 为 
正 态 白 噪声 ,其 均值 为 m. (n) ,方差 为 o2(n). # X (n) 取 值 为 x,, 则 转移 概率 密度 
为 f(z | x,), 它 也 是 正 态 的 . 

正 态 - 马尔 可 夫 序 列 的 数字 特征 : 












条 件 均值 E[X(n+1)| z, J= Ar, + m. (n) 

条 件 方差 D[X(n+1)| z, ]= (n) 

均值 E[ X(n+ 1) ]= Amx(n) + m.,(n) 

方差 D[ X(n+ 1) ]= Ašox (n) + (n) 

协 方差 Cx(n,s) = E([ XG) — mx (n) ][ X(s) — mx (s) J) 
= A” ax (s) 


如 果 X) 是 平稳 序列 , 则 
Cx (ñs) = Allg? 

【 例 5. 10〗 设 Xi,Xs,…,X,,… 是 独立 随机 变量 ,概率 密度 函数 fz G) 一 

Jf, Cz) , 382488 I 
Y, = Xi, Y; = X, + Xose ,Y, = Xi + X, + ee + X, 

证 明 :Y i, Y, ，… Y, 5 是 马尔 可 夫 序 列 ， 

证 明 因为 

fO y2) = fy, (O, | Y, = Xi) fy, (y1) 

又 由 已 知 条 件 得 
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Jy, (° | Y, = y) = Jx +x, (° | X, = yı) 
= fx, (X: = yh — a == 3⁄2 
= fx, (ys — y1) 
= 户 (y = y) 
故 Fiy) = fi) fyz — yi) 
推广 到 nn 个 随机 变量 有 
FOD ya In) = fi Or) fa ye — y1) fa (y, — Yai) 
) = Jf yr y ° `, Ya) 
Jf ry 6° ** s Ya) 
PEH, SOn | yaa yaa 531) B Yr synas"… AA, Bf Y.) 是 一 个 马 
尔 可 夫 序 列 . 





而 J | Ja—1 yi 一 2 s °" ° > 1 == Je (y, yi 


5.4.2 扩散 过 程 








定义 5.9 ”状态 和 时 间 参 数 均 连续 变化 的 马尔 可 夫 过 程 称 为 连续 马尔 可 夫 
过 程 ,又 称 为 扩散 过 程 ' u 
x O x 是 É | qI x 
有 O 





则 称 {XC)， ie T 是 扩散 过 程 -o 
pppn 
f(z,,t, | za strai Erz otai Th) = frist | Zest) 
扩散 过 程 的 统计 特性 完全 由 其 一 阶 、 二 阶 分 布 函数 决定 : 


了 sti mas toy smn sb) 


n—1 
= filr td [A e steri | Zesta) 


T = [Í] A Ceen sten | zd [Ae] 
扩散 过 程 的 转移 概率 为 


PtsyzitA) = PXD € A| X = z),s,t € T,s < 
其 中 A 为 正 态 空间 了 的 一 个 子 集 . 4 A= (一 co,y) 时 ,有 
Pis,z;t,C—co,y)) = P(XG < y | X6) = x) 
一 般 地 ,将 P{s,xr;t,( 一 co,y)) 记 为 
F(s,z;st,y) 一 下 (ty | sx) = P{X(t) < y | X(s) = x) 
称 之 为 扩散 过 程 的 转移 概率 分 布 ， 
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若 F(s.,z;t, y) 关于 y 的 导数 存在 , 则 
fGsymit y) = f(t,y | s,z) = ÊF szig) 
称 之 为 扩散 过 程 的 转移 概率 密度 , 则 有 
F(s,z;t,y) = | frst du 


若 满足 F(s,z;t,y) = F(t—s;z,y) = F(z;z,y),BIJ#RE( XG: € T) 为 齐 次 


的 连续 马尔 可 夫 过 程 . 


RIX), Z 0) 的 转移 概率 分 布 函数 是 F(s,x;t,y) ,由 连续 性 知 , 当 Az 很 小 


BF, XG + Ag 一 XX(z) 也 很 小 , 即 , 对 任意 6 二 0, 有 
limP{|X(t+AtD)— X |> ó| XHM = z) = 0 
Ar 0 


或 lim | fltsryt At,y)dy = 0 
| yz | >ë 


若 考虑 加 强 条件 , 即 对 任意 二 0,At 全 0, 要 求 


k= i f, G, mt Sk, yhdy 
a0 At 
| xz | 28 


= | fy(t— At,z;t,y)dy = 0 


Ar-0 人 At 
| y= | >ò 

lim =L Cy — aht = A, y)dy 

Ta | zz | <è 

— lm =l. | (y—x)f = A Titsy dy = a(t,zx=) 
Atz-0 At |- 

it | (y z £. Gr pyt + Atatay 

ao AE | 8 


= lim f (y— z) f, (t— At,z;t,y)dy = b(t,z) 


a0 At 
| y~z | <ë 
满足 式 (5.1) ~ RG. 3) 的 马尔 可 夫 过 程 是 扩散 过 程 ,其 中 
f(tsxr;tt At,y)dy = dFG(z,z;t + At,y) 
Patr) 为 偏 移 系 数 , 称 5(t,z) 为 扩散 系数 , 均 不 依赖 于 5. 
扩散 过 程 的 C-K 方程 为 
站 | 2, y, ) — | raja, | Tenka) Cr: st, | Tish ddr 


EP z, > t, > t, 
【 例 5. 11] 已 知 一 个 独立 随机 变量 序列 Xi ,XXX 有 
fx. (z) = f, Ca) 


(5.1) 


(5.2) 


《5. 89) 


AY, = X, , Y. = NI + X, ,... Y, = X +X, +e + X, ,# E(X,) = 0, X, 5 


Y, i 相互 独立 ,证 明 ; 
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E(Y, | Ye s Y ,—2 ° Y, ) = Y. 
由 例 5.10 知 ,{Y,} 是 一 个 马尔 可 夫 序 列 , 则 


证 阴 
EY, | Y= +Y u ne yy ) 
十 cc 
= [| afo | Yni yy 一 2 stoy ddyn 
= P afo | Yr- 1 )dy, = ELE: | Yi 
n n—l 
又 因为 Y, = DX;= X, +) X, = X, +Y 
i=l i=l 
故 
ECY | Y. 3) = E(X, FY , | Y= ,3 
= FN, | Yu) HEY | Yn == EY a | Yu 5 
设 处 是 任 一 随机 变量 ,g(x) 是 一 已 知 函 数 , 由 条 件数 学 期 望 的 定义 ,有 
+c 
E[g(X) | =] = | g(z)p[e(z) | xjdzr 
所 以 Pigia) | X = zí = 1,P1g<Xz) | Xë z) = 0 
故 ELgGCz) | >=] = l g(z=)ó6(X — z=)dxz = g(X) 
ŻA X = Y, i, g(X) = Y, .. 则 有 ELY, | Y, , ]= Y, ,从 而 证 得 
E[Y, | Yes o ae YY ]= Yasi 
[B] 5.12] R(X), C [0, + oco)) 的 转移 函数 是 
a 
—— exp = y (y, 0 =< s= t 
Pisas ada sma e gar == 3 | "5 
Teentys (z), s= 记 
证 明 : 此 马尔 可 夫 过 程 是 扩散 过 程 ,并 求 出 偏 移 系数 wa(iz) 和 扩散 系数 
b(t,z). 
证 明 因为 
1 十 co . 
I (并 一 y) fGt,z;t+ At,y)dy 
要 Í = r J [ 全 (y— z)? 2 _ r 
AJ... ETD) ET P| Seti s dy = 30°At 


于 是 对 于 固定 的 6 及 i 一 0,1,2, 有 
(z=— y)'f (t,z;t + At,y)dy 
| y~z | >ë 


本 
l Cz y) fritt Az,y)dy = saat (AD: 


Die 


< 
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az) 一 lim 元 | Cy- ax) f l(t ryt + Aty y)dy 
At—0 
| y= | <ê 





Foo 
= lm 二 | o-o fart Aat y)dy = 0 


Ar0 At 
b(t,z) = lim d. f (y — rt trv) dy 
a0 A 
| yz | <è 
Lf 3 
= lim =] (y—=x)2fG(t.z;t + At, y)dy = ë° 
ato AtJ —~» 


所 以 ,扩散 过 程 的 三 个 条 件 都 满足 ,此 马尔 可 夫 过 程 是 扩散 过 程 , 且 偏 移 系 数 a(t, 
x) = 0, 扩 散 系 数 b(t, x) == ð. 


5.5 应 用 举例 


在 实际 应 用 问题 的 建 模 中 ,连续 时 间 马 尔 可 夫 链 使 用 非常 广泛 ,下 面 举 一 些 在 
应 用 中 具有 一 定 代 表 性 的 例题 ,可 突 一 斑 . 

【 例 5. 13〗 (Yule 过 程 ) 考察 生物 群体 繁殖 过 程 模型 . 设 群 体 中 各 个 生物 体 的 
繁殖 都 是 相互 独立 的 、 强 度 为 人 的 Poisson 过 程 ,并 且 群 体 中 没有 死亡 ,此 过 程 称 为 
Yule 过 程 . 

(1) 说 明 Yule 过 程 是 连续 时 间 的 Markov 链 ; 

(2) 计算 Yule 过 程 的 转移 概率 . 

解 (1) 设 时 刻 0 群体 中 有 1 个 个 体 , 则 群体 将 有 的 个 体 数 为 {1,2,3,…}). 以 
T,G > 1) 记 群 体 数目 从 i 增加 到 i 十 1 所 需 的 时 间 , 由 Yule 过程 定义 知 , 当 和 群体 数 
目 为 i 时 ,这 1 个 个 体 是 以 相互 独立 的 Poisson 过 程 来 产生 后 代 的 ,由 Poisson 过 程 
的 可 加 性 (习题 3.3) 知 ,这 相当 于 强度 为 Ai 的 Poisson. 由 Poisson 过 程 的 独立 增 量 
性 易 知 ,T; 与 状态 的 转移 是 独立 的 , 且 T, 是 相互 独立 的 、 参 数 为 i 的 指数 随机 变 
量 , 这 说 明 Yule 过 程 是 连续 时 间 的 Markov 过 程 . 

(2) 下 面 求 Yule 过 程 的 转移 概率 : 

由 于 考虑 的 是 单一 的 始祖 XO) 二 1, 根据 模型 的 假定 有 

ba (h) = P(XG +h) 一 和 GD) = 0 | XG) = k) = 1— Ah + o(h) 

b. (h) = P(XG + h) — X0) = 1 | X = k} = Ah + o(h) 

Prei (h) = P(XGt h) — XG) = ¿| XG) = k) = o(h),i > 2 
P(XG +h)— XG) <0 | XG) = #) = 0 

由 此 导出 p; (t) 满足 的 微分 方程 ,首先 
1— Aa Ch) _- 

h 





lim 
h—0 





qa = kà 
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lim Perri ci = Qik 一 kÀ 
h0 h 
从 而 
bP; Q) = qaa ba s (8) — grpy G) 
= Mpini(t) — Mps (t) 
35 j= im, 
B's=— Mp G) 
解 得 b (t) = e 
3p j= i+ 1 时 


Pinia E) = ÀG pa (t) — Apin (t) 
= AGL Le pl 
这 是 一 个 一 阶 线性 微分 方程 , 它 的 解 为 
Di (g) = ie kr(] — e y 
当 了 一 ;十 2 时 ， 
Paonr) = Mpa (y — bias E 
= [AG HL Pe _ A b. aa (t) 


Pru (t) = iG — 1)e™ (1 — ez y2 


CO 一 人 


Ii Ñ " 
.— es | 

【 例 5.14】 ( 排 对 间 题 ) 设 有 一 服务 台 ,[0,1) 内 到 达 服 务 台 的 顾客 数 是 服从 
Poisson 分 布 的 随机 变量 .单位 时 间 到 达 服 务 台 的 平均 人 数 是 4. 服务 台 只 有 一 个 服 
务 员 ,对 顾客 的 服务 时 间 是 按 负 指数 分 布 的 随机 变量 ,平均 服务 时 间 为 l/a. 如 果 
服务 台 空 闲 , 则 到 达 的 顾客 立刻 得 到 服务 ;如 果 顾 客 到 达 时 服务 员 正 在 为 另 一 顾客 
服务 , 则 他 必须 排队 等 候 ;如 果 顾 客 到 达 时 发 现 已 经 有 两 人 在 等 候 , 则 他 就 离开 不 
再 回来 . 设 久 (1) 代表 在 上 时 刻 系 统 内 顾客 人 数 (包括 正在 被 服务 的 顾客 和 排队 等 候 
的 顾客 ). 假 设 系统 在 ! 一 0 时 处 于 零 状态 , 即 服务 人 员 空 闲 . 求 上 时刻 系 统 处 于 状态 
J 的 无 条 件 概 率 p A) 所 满足 的 微分 方程 . 

解 (1) 写 出 状态 空间 :I = 二 {0,1,2,3}. 

(2) ROEE: 

D 3# XG) 一 0 时 ,在 [t,t 十 At) 内 到 达 一 个 顾客 的 概率 为 

poa (At) = AAt + o( At) 
在 [i,t 十 At) 内 到 达 两 个 或 两 个 以 上 顾客 的 概率 为 
bojo (At) = ol(A1t) j= 2,3 
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因此 
A __ 
i T T 
oaw = lm bo; (At) = Ó 
At—0 $ 


b Da = 0, T4 qo 一 一 人 . 
JE 
@ 5 X() 一 1 时 ,表示 在 :时 刻 有 一 个 顾客 正在 被 服务 . 由 指数 分 布 的 无 记忆 
性 可 知 ,在 [t,t 十 At) 内 完成 服务 的 概率 为 
(1— e) = pAt + o( At) 
由 此 可 知 ,在 At 时 间 内 系统 由 1 状态 转 入 到 0 状态 的 概率 为 
bo (AO = [wpAt 十 oCAt)][1 一 AMAt 十 o(Ab] = At o(AmD 








故 
pw Caz 
T = 
在 At 时 间 内 系统 由 1 状态 转 入 到 2 状态 的 概率 为 
bu (Ag) = [1 — pAt HoA) AAt +H olat] = AAt + o(At) 
故 
qa = pg AAD L 
同 理 可 得 
qis 0 
qu =— Q +) 
qzx 一 0 
qa 一 人 
q3 = À 
gs =— A+ n) 


O ž XO 二 3 时 ,系统 不 再 接受 新 顾客 ,此 时 ,状态 只 可 转 到 2 或 仍 在 3. 当 
X(t) 二 3 时 ,在 At 时 间 内 完成 服务 的 概率 为 
(1—e 2) = pAtto(At) 


因此 
gu = 
qz = 0 
gal 0 
qa == p 


TAT Q EuT: 
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= 三 二 从 0 
pal” 一 (A 十 jp) À j 
ý i 一 十 pg) À 
Lo 0 # ká 
(3) 写 出 方程 
一 二 
dt 
= àpo 0) — A F wD pi A) F uba (t) 
D L Api (D — A HD p H ppa) 
iee = àp: (t) — up: (t) 
t 
初始 条 件 为 


bó (0) = 1 
(pi;(0) = 0,7 = 1,2;3 
【 例 5.15〗 ( 生 灭 过 程 ) 仍然 考虑 一 个 生物 群体 的 繁殖 模型 .每 个 个 体 生育 后 
代 如 Yule 过 程 的 假定 ,但 是 每 个 个 体 将 以 指数 速率 死亡 ,这 就 是 一 个 生 灭 过 程 . 它 
的 状态 为 (0, 1,，2,…}), 在 状态 i, 它 能 够 转移 到 i 十 1 或 i 一 1. 设 T; 表 示 过 程 从 i 到 
达 i 十 1 或 i 一 1] 的 时 间 , 类 似 于 Yule 过 程 ,T; 服从 参数 为 记 十 认 的 指数 分 布 ,并 且 
下 次 转移 到 i 十 1 的 概率 是 - 千 3， 转 移 到 i 一 1 的 概率 为 j 任 二 这 说 明生 灭 过 程 是 连 
续 时 间 的 Markov 过 程 . 
同样 的 , 生 灭 过 程 也 满足 
ba (h) = PIXG +h) — X4) = 1| XA) = k} = Dh oh) 
b. a a h) = PIXG +h) — X4) 一 一 1 | X) = k) = kuh + o(h) 
ba (h) = PIXG8 +h) — XA) =i | XG) =k) =1— Q +)Ëh + o(h),i > 2 





b (0) = 05 
从 而 导出 生 灭 过 程 的 Q 矩阵 为 
=A À 
六 —Fpn) À 
Q = | --` 2y — 20) A 


向 后 方程 为 
b GQ) = ipp im. (t) — (À + ip) pj Œ) Hapai (t) i 1 
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bP a G) =— Abu (t) + Abi; (t) 
向 前 方程 为 
pa) = G + ppisn — Q + i) py G) + Api (8) 
P'o) =— Apnt) + pupa lt) 

【 例 5.16] (系统 调整 问题 ) 考察 某 一 系统 运作 情况 ,如 果 系 统 运 作 正 常 , 则 
认为 系统 处 于 状态 1; 如 果 系 统 正在 调整 , 则 认为 系统 处 于 状态 0. 系统 运作 一 段 时 
间 后 ,会 遇 到 不 正常 运作 ,此 时 需要 调整 ,调整 后 恢复 运作 .假定 系统 从 开始 运作 直 
至 需要 调整 的 运作 时 间 是 随机 的 ,服从 参数 为 六 的 指数 分 布 ,密度 函数 为 pe. 
t 二 0; 而 调整 期 也 是 随机 的 ,服从 参数 为 的 指数 分 布 , 密 度 函 数 为 Mey (> 0. 假 
定 运作 周期 是 相互 独立 的 ,调整 期 也 是 相互 独立 的 .如果 令 X() 为 系统 在 时 刻 1 所 
处 的 状态 , 则 X(i) 是 时 齐 Markov 链 . RAHA XO) 的 转移 概率 . 

解 ” 下 面 列 出 Kolmogorov 微 分 方程 , 如 果 系 统 在 时 刻 1 处 于 状态 0, 而 在 时 刻 
ti 十 AL 变 为 状态 1, 当 时间 增 量 Az 很 小 时 ， 


åt 
pu (At) = f àe ¥dt = 1 — e™°™ = AAt + o(At) 


所 以 
1 Pa (At) _ 
qa hm Ai A 
同 理 
buo (At) = yAt+ol(At), 则 gio = u 
于 是 得 到 
=Å A 
en 
4 p 


从 而 Kolmogorov 向 前 方程 为 
D'o) =—Apn(t) + upat), i=0,1 
palt) = àpo — pupat), i=0,1 
由 于 po) 十 pa(t) = 1, 故 将 pa(t) = 1— pw(t) 代入 第 一 个 方程 得 
BoD HAH polt) = 
在 初始 条 件 p; (0) = ë; 下, 上述 方 程 的 解 为 


y 一 e 工 ) d7 [e =] facerdos dz] 


Jee p = À + usq 二 py, 解 得 


gW = É „a AH) 
P iFa + ce 


利用 Po (0) a 1, pio (0) = 0 确定 常数 c, 4 


oo 人 =— A 
EPET 


~ta) 
e 








pio (t) Asa Tam 
再 利用 pa (t) = l — pio (t) 得 
== À Sas A —(Xtp)t 
TTE ET 


2 U ato 
bu (9) = IA K aen 


【 例 5.17] (传染 模型 ) 考虑 有 m 个 个 体 的 群体 ,在 时 刻 0 由 一 个 已 被 感染 的 
个 体 与 m 一 1 个 未 受到 感染 但 可 能 被 感染 的 个 体 组 成 .个体 一 旦 受 感染 将 永远 处 于 
此 状态 . 假设 在 任意 长 为 hh 的 时 间 区 间 内 ,任意 一 个 已 被 感染 的 个 体 将 以 概率 ah 十 
olh) 引起 任 一 指定 的 未 感染 者 成 为 感染 者 . 若 以 X (t) 记 时 刻 上 群体 中 已 受 感 染 的 
个 体 数 , 则 {X(t),t 20) 是 一 纯 生 过 程 ,其 中 

(m—nna, n=1,2,…,m—1 
ük 0, 其 他 

这 是 因为 当 有 nn 个 已 被 感染 的 个 体 时 , 则 m 一 nn 个 未 受到 鳄 染 的 每 一 个 个 体 将 以 速 

记 了 为 直至 整个 群体 被 感染 的 时 间 ,T; 为 从 i 个 已 感染 者 到 i 十 1 个 已 感染 者 
的 时 间 , 则 


m—1 
T= AT 


H + T, 是 相互 独立 的 指数 随机 变量 ， 其 参数 分 别 为 
À; = m —¿i)iaa, ¿i= 1,2,-- ,m—1 
所 以 ， 





E(T) = Pig = 13 : 


a Z ilm— i) 


j = 2 
per = Som = 二 [ms] 


1 
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1. Yule 过 程 计 算 群 体 总 数 从 1 增长 到 N 的 平均 时 间 . 

2. 假定 生物 群体 中 的 各 个 个 体 以 指数 率 A 出生, 以 指数 率 j 死亡 ,另外 还 存在 由 迁 
入 引起 的 指数 增长 率 0, 试 对 此 建立 一 个 生 灭 模型 . 
3. 设 有 一 个 质点 在 1,2,3 上 做 随机 跳跃 ,在 时 刻 t 它 位 于 三 点 之 一 , 且 在 [1,t 十 h] 
内 以 概率 0.5h + o(h) 分 别 可 以 跳 到 其 他 两 个 状态 . 试 求 转移 概率 满足 的 
Kolmogorov-Feller 方程 ,转移 概率 p; (1) 及 平稳 分 布 . 
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4. 设 [0,t] 内 到 达 的 顾客 数 服 从 泊 松 分 布 ,参数 为 验 . 设 有 单个 服务 员 ,服务 时 间 为 

指数 分 布 的 排队 系统 (M/M/1) ,平均 服务 时 间 为 1/p. 试 证 明 : 
(1) 在 服务 员 的 服务 时 间 内 到 达 的 顾客 的 平均 数 为 A/p; 
(2) 在 服务 员 的 服务 时 间 内 无 顾客 到 达 的 概率 为 jy/ (CA +u), 

5. (机 器 维修 问题 ) 设 某 机 器 的 正常 工作 时 间 是 一 负 指 数 分 布 的 随机 变量 , 它 的 平 
均 正常 工作 时 间 为 1/4; 它 损坏 后 的 修复 时 间 也 是 一 负 指 数 分 布 的 随机 变量 , 它 
的 平均 修复 时 间 为 1/y. 如 果 该 机 器 在 上 一 0 时 是 正常 工作 的 , 问 在 上 一 10 时 该 机 
器 处 于 正常 工作 状态 的 概率 是 多 少 ?长 时 间 工 作 下 去 ,机 器 处 于 正常 状态 的 概率 
如 何 ? 

6. (电话 交换 问题 ) 菜 电话 总 机 有 n 条 线路 .在 茶 一 呼唤 来 到 时 如 有 空间 线路 , 则 该 
呼唤 占用 其 中 某 一 条 空闲 线路 ,并 开始 通话 . 如 果 通 话 结束 , 则 该 线路 使 用 完毕 
而 称 为 空闲 线路 ,等 待 下 一 次 呼唤 . 如 果 呼 唤 来 到 时 直到 nn 条 线路 均 被 占用 , 则 
该 呼唤 遭 到 拒绝 而 消失 . 设 有 按 Poisson 分 布 的 呼唤 流 , 即 在 [7,1 十 At) 内 来 到 一 
次 呼唤 的 概率 为 4At 十 ol(At), 来 到 两 次 或 两 次 以 上 呼唤 的 概率 为 olA1); 并 设 如 
果 某 一 线路 在 某 时 刻 t 被 占用 ,而 在 [t,t 十 At) 内 这 条 线路 空 闪 出 来 的 概率 为 jyAt 
十 oCAt), 即 通话 时 间 按 负 指 数 分 布 . 求 总 机 在 1 时 刻 有 kk 条 线路 被 占用 的 概率 ,以 
及 当 t 一 十 co 时 ,有 上 条 线路 被 占用 的 概率 . 
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款 是 解决 许多 概率 理论 及 其 应 用 问题 的 重要 工具 . 比如 随机 游 动 .随机 点 过 
程 、 精 算 风 险 分 析 和 数理 金融 等 . 比较 典型 的 随机 模型 有 “公平 赌博 ”, 即 赌博 中 ,每 
个 “参与 者 ” 有 相同 的 机 会 赢得 和 失去 . 著作 为 一 类 特殊 的 随机 过 程 由 J. Vile 和 
P. Levy 引入 ,1953 年 J. L. Doob 认识 到 著 具 有 很 重要 的 理论 和 实用 价值 ,类 似 于 
马尔 可 夫 过 程 , 进 而 基于 离散 和 连续 参数 空间 工 给 出 了 离散 时 间 蒜 和 连续 时 间 款 
的 定义 . 

【 例 6.1] 公平 赌博 . 

设 {Y,,n 宇 1)i.i.d, 表 示 输 和 赢 ,P{Y, = 1) = P{Y, =—1) = 0.5, 2 b, 
= b,(Y i Yas Yma) 2 Xo 表示 赌博 前 的 初始 赌资 , 则 第 nn 次 赌博 后 的 赌资 尽 , 为 





X, = X, + S) Y, 
i=l 


则 
EX ma | Yr Y: ss ,Y,) = X, 
即 已 知 前 面 n KERER, Antl Z Wk B 5 65 QF 3) Bh $t 3 J 3 n 2 Bh k E 
证 明 tF Xe = X, +b, Y, 
下 (Xi | Y. ,Y,,-- ,Y,) = E(X, +b, iY, | Y, ,Y,,-. ,Y,) 
= X, ECD ei, |Y: syY, ==, Y.) 
= X, +b, EY mi | YY ,Y,) 
由 于 {Yn 宇 1}iid,E(Y,) = 0,n = 1,2,…, 因 此 
EY ma | YiyY2 yyY,) = EY p) = 0 
从 而 
ECX, | Yi Y; ye = X, 
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定义 6.1 EMEX, on > 0) 称 为 关于 {Y,,n 宇 0) 的 著 , 如 果 满 足 
CIX, EY Xe Y) "的 函数 ; 

(DEC X, |) < ee; 

DEX tN 


定义 6.2” 称 {X,,;n 主 0) EZX+[(Y,,n> 0 的 上 蒜 , 如 果 对 任意 2 之 0,X， 
E YoY eY 的 函数 ,E(X;) 去 十 se HEX, | Yos Yrs Y) < X,. Z 
似 地 , 称 {X, n0) ERF Y, n0) BJ TR, m RER n> 0, X, Æ YoY 
YO BAA EAD AF oA EAX oY 过 和 
这 里 XI = max(0,X,), X; = max{0, — X,). 
显然 , 蒜 的 定义 描述 的 是 “公平 赌博 ,上 、 下 款 分 别 描述 了 "不利 赌博 ” 和 "有 利 
FAEN o EAE, S F, = (Y ,Zi Yn) Xa 关于 名 可 测 , 则 
Bs | | 
“定义 6.3” 设 (Q,Z,P) 是 概率 空间 , 称 { 色 ,n 宇 1) 是 3 的 非 降 子 oa 代 数 流 ， 
Z, n 1) 是 多 的 子 o 人 代数, 上 且 Z, n C 和 1; 称 随机 序列 (X,,n 之 0) 是 (2 ‚n Z= 
1) 适应 的 , 若 X, 关于 Z, 可 测 . 


”定义 6.4， 设 (多 寺 半 1) 是 多 的 非 降 子 o 代数 流 , 随 机 序列 (和 ,全 0) 称 
为 是 关于 {和 %,n > 1) 的 拷 [ 简 记 为 (X, ,为 ) 是 蒜 ], 如 果 

(D(Xun 宇 0} RE (2, ,n > 1) 适应 的 ; 

DEE nE X; |> —= eo, 

人 


定义 6.5 5 设 { 瑟 92 人 1 是 乡 的 非 降 子 代数 流 , 随 机 序列 {X, n > 0) iR 
为 是 关于 {多 n> 1) 的 下 (上 ) 蒜 [ 简 记 为 (X A) 是 下 (上 ) 拷 ] ,如果 
(1)(X,,n > 0) ÆR on > 1) 适应 的 ; 
(2 任意 mBCl X. |) < 4125; 
(INE XG | A CSS Na. s. 
如 果 考 虑 连续 参数 空间 ,对 于 连续 时 间 随 机 过 程 {X,,t > 0) ,有 如 下 的 连续 
时 间 著 的 定义 : 
定义 6.6 (12.20) 是 3 的 非 降 子 a 代数 流 ( 即 入 己 久 ,s 二), 随 机 过 
程 {X,,t Z 0) 称 为 是 关于 { 色 ,t > 0) 的 著 [ 简 记 为 (X,; 免 ) E], mR 
(1){X,t > 0) . 0) 适应 的 ; 
(2) EAS p EC|: X, |) <te; 
Co hb Oo te N ANS N as. 
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定义 6.7 R(t > 0) 是 久 的 非 降 邓 a 代数 流 ,随机 过 程 (X, t > 0) 称 为 
是 关于 人 多 ,全 0) 的 下 (上 ) 款 [ 简 记 为 (X， ,F) 是 FC 上 ) B], u 

DOK aro Æl Fat > 0) 适应 的 ， u x x x 

(2) ER LEU X x — 

EX, FI COOK as 

KINNE SA AA th A F E Em ETBRI AEA PE F 

(1) 若 (X,, 色 ) 是 款 , 则 E(X,) = ECX Vt € T. 

(2) EXA) J F hoy (— X, A) JE: F 8k. 

(3) EXE) Y P) 是 下 (上 ) h WHER a 20,522 0.,(aX,+bY,,2,) 是 
FCE) #h. 

(4) EX F), Y F) 是 下 款 , 则 Cmax{X,,Y,} 7) A FER. 

(5) 设 (X,, 色 ) 是 款 ( 下 款 ),pCz) 是 R 上 的 凸 函 数 , 且 满足 ELo(CX,)] 一 十 cc， 
则 p(X,) 6 F12,,t > 0) BJ F wh. 

如 果 考 虑 离散 参数 空间 T, 则 离散 蒜 具 有 类 似 上 述 性 质 (1) — (5), RER Ah 
给 出 . 

【 例 6.2] ARF, P) 为 一 概率 空间 ,v 为 SF 上 的 一 有 限 测度 ,名 ,0，… AF 
LAERT o RAA. BE vfo P 都 限制 在 多 上 时 汉 受 控 于 己 , 即 假定 若 A € Z, 
E PIA) = 0 BJ) # o(A) = 0. g Radon-Nikodym 定理 得 知 , 当 v,P RIRE F, 时 ， 
KZ o s T P 的 Radon-Nikodym 导数 , 记 为 义 ,. 则 X, £ + Z, 可 测 且 对 P 可 积 , 对 
EAER, X, 满足 


(A) =| XdP 
A 


又 由 于 A 到, 因此 AE 多 ,i, 故 v(A) 一 | XuidP, 所 以 ,由 条 件 期 望 的 定义 知 


EX a A) = X, 
【 例 6.3] 设立 是 (2,9,P) 上 的 可 积 随机 变量 ,{ 有 多) 为 允 的 非 降 子 代数 流 ， 
定义 
X, = E(Y | Z,) 

Pp X, AYAT Z, 的 条 件 期 望 .由 条 件 期 望 的 定义 知 ,X, < + Z, 可 测 且 可 积 . 且 由 
条 件 期 望 的 性 质 知 

E(X,i | 7) = EL[E(Y | Fra) | R] = E(Y | F) = X, 
Bat. Xn T) AR. 


【 例 6.4] g X,ii d, EX, [D <+ 0, EHS = 0,S, = >)X 是 关于 
k=1 


(XiX Xan) 05) žk, 
ME BB 显然 S 关于 (Xi O CELLED. D) 可 测 , 且 
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E(S,) = E( 1 X,)= 
k=1 
£ Z, as o (X, ,XXX ) , A] 
下 (SH | Fr) = E(X ma + Š, | Ap) 
= E(Xm | Z,) + EG(S, | A) 
= ECX mi) + S, = S, 


E(X,) <+ ce 
=1 


k= 


综 上 所 述 ,S, = XX, 是 关于 (Xi ,X;,…,X,) AR. 
k=1 


注意 : 若 j = E(X,) >> (<0, mj 
(1){S,,n 宇 0} 是 关于 (Xi1,X;，…,X,) 的 下 (上 ) #. 
(2){M = S, 一 ny) 是 关于 (Xi ,Xs，…,X,) 65 9k. 
【 例 6.5】〗 考虑 一 个 公平 博弈 的 问题 , 设 X ,XX,，…,X,，… 表示 每 次 赌博 ( 投 
硬币 ) 的 结果 , 则 它们 独立 同 分 布 , 且 
1 


PIX, = 1) = P(X, =—1) = > 


假设 按照 以 下 规则 来 赌博 ,每 次 投 搓 硬 币 之 前 的 赌注 都 比 上 一 次 翻 一 倍 ,直到 
# T Mk Ep 48. 2 W, 表示 第 n 次 赌博 后 的 总 钱 数 ,W。 = 0. 
假设 前 n 次 投 出 的 硬币 都 出 现 了 反面 ,按照 规则 ,已 经 输 了 1 十 2 十 4 十 … 十 2"! 











= (2" 一 1) Z, p W, 一 一 (2" 一 1), 假 如 下 一 次 硬币 出 现 正面 , 按 规则 Wa 一 
2" — (2” — 1) 二 1, 由 公平 的 前 提 知 
PIW,, = 1|W, ==- D) = + 
P{W, =—2"—2" +1|W, = 一 (2" 一 1)} = + 


无 论 何 时 ,只 要 赢 了 就 停止 赌博 ,从 而 W, 从 赢 了 以 后 就 不 再 变化 , 即 
P{W = 1| W, = 1) = 1 
DiE E(W,., | Z) = W,, FP (W, ,2Z,) Z $. 

【 例 6.6] (Polyas 坛子 抽样 模型 ) 考虑 一 个 装 有 红 黄 两 色 球 的 坛子 . 假设 最 
初 坛子 中 装 有 红 、 黄 色 球 各 一 个 ,每 次 都 按 如 下 规则 有 放 回 地 随机 抽取 :如 果 拿 出 
的 是 红色 的 球 , 则 放 回 的 同时 再 加 入 一 个 同色 的 球 , 如 果 拿 出 的 是 黄色 的 球 也 按 同 
样 方式 操作 . 设 M, 表示 第 n 次 抽取 后 的 坛子 中 的 红 球 所 占 的 比例 ,证 明 :{M,,n 宇 
1) Z #. 

证 明 第 nn 次 抽取 后 坛子 里 球 的 个 数 是 nn 十 2, 以 XX, 表示 第 n 次 抽取 后 的 坛 
子 中 的 红 球 个 数 ,M, 表示 第 n 次 抽取 后 的 坛子 中 的 红 球 所 占 的 比例 , 则 M, = 

X, 


n + 9 


(X en > 1) # — # 3k Rr > n Markov 链 , 其 转移 概率 为 
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k _ ,kh 
PIX. = k+1| X, = i) = 
a e _ hop 2— Ë 
PIX. =k |x, = = 3 
因此 
E(X,., | X, = k) = (#+ 1)P(X,, =k+1| X, =b) +ËPIX, =k| X, = b) 
_ Ë (n+ 2— k) 
人 
5 k 
=k IZ 
Bp 
_ x, 
ECA, | X. = X, t-ra 
由 于 M, 表示 第 n 次 抽取 后 的 坛子 中 的 红 球 所 占 的 比例 , 则 M, = -Š= M, 


ATF, = o(X Xz% , X, ) 可 测 , 且 
EC(Mn | Z,) = EC(M | X,) 
X, 
“SSS o ok | 22 


1 
n 十 3 


= E( 





下 (X。 | X,) 


lI 








(ar) 


n+2 


lI 


WFS 
X 





=< =M 
° 
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一 般 而 言 ,关于 {X, ) 的 蒜 {M,,z 二 0) , 易 知 对 V n> 0,48 E(M,) = E(M,) 成 
立 . 根据 实际 需要 ,通常 更 关心 的 是 对 于 任意 随机 时 刻 T, 是 否 仍 然 有 EM) = 
EM.) 成 立 . 下面 借 助 著 的 停 时 定理 来 讨论 这 个 问题 . 

定义 6.8 设 {X,,n 宇 0) 是 一 个 随机 变量 序列 , 称 随机 函数 本 是 关于 {X,， 
n> 0) 的 停 时 ,如 果 全 取 值 于 (0,1,2,…, 十 co), 且 对 任意 ns 有 《T= 二 n) E = 
o Ka s Aa y X). 

【 例 6.7】 #T=n, M TÆR. Fp £ Beb JF36 84 OARE n B 2 6 — £ B 

【 例 6.8】 首 达 时 是 停 时 .{X, ,2 三 0} 是 一 个 随机 变量 序列 , 设 人 为 一 事件 集 


150 第 6 章 蒜 和 布朗 运动 





TEAS = infin: X, € A TØ) = infin: X, € O) = 
则 TCA) 是 停 时 .事实 上 
(T(A) = ne (X, € A,X, EAX € A,X, € A) 
显然 1T(A) =n} 完全 由 Xos Xis X200 X, AZA T(A) 是 关于 {X,,n 宇 0) 的 


定理 6. 1 — css os ' … Hee) 的 随机 变量 , 则 下 列 论断 
UTRAN, x 
(2)(T = ni € As: 
OHT n) € Fn; 
(IT n 6 +. 
注意 到 以 下 事实 : 


故 上 述 结论 成 立 . 
定理 6.2 设 了 .S 是 两 个 停 时 , 则 了 T 十 S.min(T,S) .max(T,S) 都 是 停 时 . 
证 明 (T+ S>n)= (IT+S> n,0< T< mU IT+S>n,T=0) 
U {T>n,S=0}U 1T>n,S> 0) € Z, 
(min(T,S) >2n)= (T > n) f) (S> n; € Z, 
{max(T,S) < ni= (T < n) N S < n) € š, 


定理 6.3 APENE) RM7) RR. TEŽFIZ n>0) 的 停 时 ， 
若 存 在 常数 使 得 T < K, 则 o 
EM: LZ) ZM | 
— EMM) 二 EM) 
证 明 ”由 于 TK, 故 TT 只 取 有 限 个 值 . 4 T = j 时 ,Mr = Mj, 于 是 


K 
z ŠM; {T=j} 
j=0 


K 
ECM; | Bx) = EC MI r=; | Fre) 


j=0 


K=} 
= JMi iry + ECMgT r=; | Fr) 
其 中 最 后 一 个 等 式 是 由 于 当 j < K — 1 PPE, MII 2; AF Z< 可 测 . 
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由 于 TK, 故 {T= K)5(T> K—1) 等 价 . 又 由 于 {( 工 > 天 一 1 € Z<, AE 
E(MkI rir}y | Z<) 一 Try 下 CM | Fka) = I r>; Mk 


从 而 
K—1 
EC(Mr | $x) = 2 M,I (r=; +ECMkl (rky | Fea) 
K—1 
= M;I (r=;} 二 I .rsk1 } Mk. 
j=0 
K—2 
= MT r=;; + Mx (I r=<ai; + Iiro, ) 
j=0 
K—2 
= ¿ MI (r=; + Mx- Iı T>K-13 
K—2 
= M;I {T= + Mx- l i r>k—2) 
j=0 
类 似 地 ,有 
E(Mr | Fk) = EĻE(Mr | Fk) | Fp] 
K—2 
= E( > MI {T=j} +Mkra I irok; | Fk-2) 
j=0 
K 一 2 
= SIMI r-i) + Trsr-z} E(Mk., | Zk) 
j=0 
K—2 
a M;I r=; + Mk; I i T>K-23 
j=0 
K—3 
一 Tirsk-s} Mk- SP >] M;I tT=j} 
重复 上 述 过 程 得 


E(M; | A) = I itso; M, = M, 

在 定理 6.3 中 ,严格 要 求 满足 TK, 即 本 有 界 , 从 实际 意义 和 概率 意义 来 看 ， 
此 条 件 都 太 强 . 事实 上 ,假设 工 是 一 个 停 时 , 且 满 足 P{T —+ so) = 1, 也 就 是 说 以 
概率 1 可 以 保证 会 停止 ,也 能 在 此 条 件 下 证 明定 理 6. 3 的 结论 成 立 . 

考虑 停 时 T, = min(T,n), 由 

My = Mr, +Mr-I rm， 一 MT 
了 (Mr) = E(Mr )+ E(M-I r>. )— E(M,I r>.) ) 

易 见 ,T, 是 一 个 有 界 停 时 ,由 定理 6. 3 知 EM ) = EM). 由 于 P(T —+ se) = 1, 
EE, 4 n>, P(T >n} — 0. # EC Mr |) <o, N] ECM irony ) > 0n 20). 
然而 第 三 项 EE(MI 47>,; > 0 却 不 一 定 成 立 . 考虑 用 例 6. 5 来 解释 这 个 问题 . 

由 例 6.5 81. (W, A7) ER, E. 
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P{W = 1 | W, = 1) =1 

Piwa = 1] 9 = (2 — 15) = ; 
P{W =— 22% BL | W, =— (i — 15) = " 
É 工 表示 赌博 停止 的 时 刻 , 则 工 是 一 个 停 时 , 且 
P{T >n = 2 

ECM, I arsy) = 2 (1 — 2") 

` n> ce 时 ,上 式 并 不 趋 于 0, 这 也 是 为 什么 有 界 停 时 定理 的 结论 在 此 处 不 成 立 


的 原因 . 
如 果 要 求 M, 和 了 满足 
lim El | M,I i Ton} |) = 0 
则 可 得 到 如 下 条 件 较 为 宽松 的 著 停 时 定理 : 
定理 6.4 ( 拷 停 时 定理 ) R Mi Mst Mps 是 关 击 外 ËR, T ZENE 


满足 
(DP T < eo) 
(2)E(| Mr |) —+ eo; 
(3) lim E(| M,I r>, |) = 0. 
则 有 E(M+) = E(M,). 
[@)6.9] 设 X, 二 a,X, 是 在 {0,1,2,…,N) 上 的 简单 随机 游 动 (p= 二 1/2), 并 
且 0 和 NN 是 两 个 吸收 壁 . 令 T 二 min(;; X, 一 0 或 N) 为 吸收 时 刻 , 求 
(1) 在 吸收 时 刻 它 在 N 点 的 概率 ; 
(2) 在 被 吸收 时 刻 的 平均 时 间 . 
解 (1) 首先 证 明 X, 是 一 个 蒜 . 
根据 简单 随机 游 动 的 定义 , 当 上 = 二 1,2,…,N 一 1 时 
P{(X A =k+1| X, =k) = PIX, =k—1 |X, = k) = 
EX ar | X, = by = > 
35 k= 0,N 时 ， 
Pia = k | K. = E= 1 
因此 E(X,,., | Z.) 一 下 (Xi | X) = X, ,& X, Z — 4 3. 
由 于 X, 是 Markov 链 ,0 和 NN 是 两 个 吸收 壁 , 故 P (T —+ co) = 1. 
由 于 X, PAAR, AEL X, |) 一 十 co, 且 
EC| Xal crsay |) = NEU trony d = 00 66 


故 满足 定理 6.4 的 条 件 , 于 是 
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EX = E(X = a 
由 于 此 时 Xr 只 取 两 个 值 N 和 0, 则 
E(X,) = N +* P{Xr = N) +0 + P{Xr = 0) 
从 而 得 到 
E(X) _ a 
N N 
(2) 设 X, 是 直线 上 的 随机 游 动 ,0 为 吸收 壁 , 已 知 X = a(0<a< N), 3. M, 
= X: —n, Wi 
EC(M | F) = ELX2 — (n+ 1) | R7] = X: + 1— (n + 1) = X? —n = M, 
因此 ,M, Z X + Z, 50X: X20 Xn) 6 3k 48 Z M, 不 是 有 界 蒜 . 
R T = mintj:Xi 二 0 或 NN), 则 全 是 一 个 停 时 ,可 以 证 明 存 在 C< 二 2,0 二 p 二 1 
使 得 





P{Xr = N; = 


P{T > n) < Co" 
因此 


E(T) = DI P{T > n) < >)Go" <+ œ 
n=0 n=0 


W Mr < N° + T 4#, 
E(M:) < E(N: + T) < N? + E( T) 一 十 co 
并 且 
E(| M, | L+) < Co" (N? + n).— 0 
从 而 满足 停 时 定理 6.4 的 条 件 , 因 此 
E(M;) = E(M,) = a° 

注意 到 ， 

E(M7) = E(X:) — EC T) 

= N' PIX: = N} +0 X P{Xr = 0) — E(T) = aN — E( T) 





从 而 ， 
E(T) = aN — a =a(N—a) 
T i + iE Bp, 22 h A X _E 39: 65 42 BJ E 60 e 25 


定理 6.5 (EPERE) 设 {M,,n 宇 0) 是 关于 {X,,n 宇 0) BJ Eh, T 
(Xn > 0) 的 停 时 , 工 ,= min(T,n). 设 存在 一 非 负 随机 变量 W, E EW) 
一 十 co, 且 使 得 

Mr, Z—W,Vxn>0 
则 有 
E(M,) => EC(MiI r<; ) 
特别 地 ， ne “nwo | 
Ma VEM YEE 
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推论 6.1 设 {M,,n 宇 0} 26 F41X,,n220) BJ E$. TEX, 2 之 0) 的 停 时 ， 
H M, 之 0, 则 有 
EC(M,) > EC(MrI (rc1) ) 
对 于 任意 的 n 宇 0, 上 园 显 然 满 足 E(Mo) > E(M,). 定理 6.5 说 明 , 当 把 n 换 成 
T 时 ,在 某 些 附加 条 件 下 ,此 结论 也 成 立 . 


63 PRÉS SKRE 


AH ERS A BH SE E BIE — 2 BJ 28 tt F M, } 可 以 收敛 到 一 个 随 
机 变量 M... 先 考虑 从 如 下 的 例子 人 手 : 

〖 例 6.6( 续 )〗 设 IM 表示 第 n 次 摸 球 后 红 球 所 占 的 比例 , 当 n 一 十 co 时 ,这 个 
比例 将 如 何 变 化 ? 

解 ” 设 0 二 a 二 b 二 1, M, <a 4 

T= min(j:j > n,M, > b) 
即 丁 表示 n 次 摸 球 后 第 一 次 比例 从 小 于 a 到 超过 已 的 时 刻 , 则 全 是 一 个 停 时 . 令 工 ， 
= min{T,m}, M3} m >n, HÆR 6.4 Ta 
E(Mr+ ) = M, <a 


E(Mr ) = E(M:- Tren) ) = E(M-I itm; ) SONT S m) 
PUT < m) < Z 


因为 上 式 对 一 切 罗 之 于 成 立 , 于 是 有 
PIT <+ =°) < 


Sja 


这 说 明 红 球 比 例 至 少 以 概率 1 一 5 不 会 超过 b. 


若 假 定 这 一 比例 确实 超过 65, 由 同样 的 讨论 可 知 , 红 球 比例 再 一 次 降 到 a 以 下 
的 概率 最 大 为 -一 <. 继续 同样 的 讨论 ,可 以 知道 ,从 a 出 发 超过 ,再 小 于 罗 ,…， 有 
n 个 循环 的 概率 应 为 
aN/l—6\ fa aN/l— Bb /ay /(1—b EE 
(z ja = Ms i Mra (8 ) fed 
因此 ,这 个 比例 不 会 在 a, 5 之 间 无 限 次 地 跳跃 ,a,b 的 任意 性 ,也 表明 这 一 比 
例 不 会 在 任意 的 两 个 数 之 间 无 限 次 地 跳跃 . 也 就 是 说 ， 极限 lim M, 存在 , 记 为 
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Miss TAER Mi 是 一 个 随机 变量 且 服 从 [0,1] 上 的 均匀 分 布 . 

下 面 不 加 证 明 地 给 出 如 下 一 般 结论 : 

定理 6.6 (Doob 收敛 定理 ) 设 {M,) 是 关于 {%) 的 拷 , 若 存在 常数 C 二 

+æ. EM, D < CNE n 成 立 ， nekem. M, patak 
到 一 个 随机 变量 M... U —Ñ U 

【 例 6. 10〗 ZX Xe, X... .是 独立 同 分 布 的 随机 变量 序列 ， X, = 3/2} 
= P{X; = 1/2} = 1/2,4 M, = 1, n> 0,4M, =X * X, ee S T 
明 M, 是 关于 Xi , 义 。，…,X,，,… 69) 3k. 由 于 (| M, |) = 1, A y, 38: k 2k Z 22 J #- #t- 
成 立 , 从 而 当 n 一 十 co 时 有 





M, > M... 
6.4 布朗 运动 的 基本 概念 和 性 质 


1827 年 英国 植物 学 家 布朗 发 现 液体 中 悬浮 的 花粉 粒 具 有 无 规则 的 运动 ,这 种 
运动 就 是 布朗 运动 . 布朗 运动 (Brownian Motion) 是 指 悬 浮 在 流体 中 的 微粒 受到 流 
体 分 子 与 粒子 的 碰撞 而 发 生 的 不 停息 的 随机 运动 . 然而 真正 用 于 描述 布朗 运动 随 
机 过 程 的 定义 是 维 纳 (Wiener) 给 出 的 ,因此 布朗 运动 又 称 为 维 纳 过 程 . 


6.4.1 布朗 运动 的 定义 


MAR R G AATA Basa LRR ae 
Ar 时 间 , 随 机 地 以 概率 户 = + 向 右 移动 Az> 0 的 距离 ,以 概率 9 = 二 向 左 移动 Ax 


> 0 的 距离 , 且 每 次 移动 都 是 相互 独立 的 . 
AA XG) 记 时 刻 1 质 点 的 位 置 , 则 
XD = Axz(KX, + X, + Xaa) (6.1) 
其 中 Lz/Atj 表示 t/ At 的 整数 部 分 , 令 
a 1, ”如 果 第 i 步 向 右 
' 一 1， 如 果 第 i 步 向 左 
且 假 设 诸 X; 相互 独立 , 易 得 
P{X;=1) = P(X, =—1) = 5 
E(X,) = 0,D(X,) = E(X) = 1 
EL[X(1)] = 0,D[X(O ] = (aati) 
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其 中 Az = c VAtyc 之 0 且 为 常数 , 它 由 具体 物理 意义 确定 . 
A At ~ 0, 即 研究 连续 游 动 , 则 有 EXO] = 0, Var[ X] 一 ct 
HRG. D 及 中 心 极限 定理 可 得 这 一 极限 过 程 如 下 的 一 些 直 观 性 质 : 
(1) 当 At->0 时 ,X(D 趋向 于 正 态 分 布 , 即 XG) ~ NO, t); 
(2){X(CD > 0) 有 独立 的 增 量 ; 
(3) {X07),t 宇 0} 有 平稳 的 增 量 . 
由 此 ,引出 布朗 (Brown) 运动 的 定义 : 
0 定义 6.9 E ENIE 0 满足: 
(]) Vs. > 0,BG T) BG) = NOt); 
OB 是 独立 增 量 过 程 ; 
(DBW 是 关于 +1 的 连续 函数 . I 
WRO; st = 0} 为 Brown 运动 ， 也 称 为 Wiener 过程 ,也 常 记 为 {W O; t >00}. 
车 c = 1,B(0) = 0, 则 称 {B(7) ;t > 0) 为 标准 布朗 运动 . 它 在 1 时 刻 的 概率 密 
度 为 





fixy) = L et 
FERT 耸 标准 布朗 运动 的 某 些 性 质 


= exeo ano, r= 0) 是 随机 过 IE ,如 果 它 的 有 限 维 分 布 是 空间 平移 
不 变 的 , 即 

Pit < a RO Ta) Kasem 
XX Sada oND Sa Lr| XO = z) 
则 称 此 过 程 为 空间 齐 次 的 , x 


由 上 述 定义 知 ， 标准 布朗 运动 具有 空 s 间 齐 次 性 . 


6.4.2 布朗 运动 的 性 质 


“定理 6.7 布朗 运动 (BU):;t > 0) 具有 如 下 性 质 : 
I (DBO: t > 0) 是 均 方 连续 的 ; ; 
: ， 是 人 
03)(B(0 4 会 0) 是 马尔 可 夫 过 程 ; 
“(4){B();t > 0) 是 高 斯 过 程 (Gaussian process). 
证 明 (1) 由 定义 6.8 知 
ELB) — B(s)J2) = Var[B()—B(s)] = e |; — s| 

因此 ， 
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limE([ BG +A) — BG) J?) = lime Ia|=0 
于 是 1B(1) t> 0) 是 均 方 连续 的 . 
(2) 因为 布朗 运动 具有 独立 增 量 性 ,对 任意 的 ;二 1, 有 

ECB) | Bly) y < s] = E[ B(s) + BGz) — B(s) |B(y),y < s] 
= B(s) + E[ BG) — B(s) | B(y),y < s] 
= B(s) + E[ BG) — B(s)] 
= B(s) +0 + 0 
= B(s) 





因此 ,{B(7);t > 0) E— 4" bh. 

(3) 任何 具有 独立 增 量 性 的 随机 过 程 都 是 一 个 马尔 可 夫 过 程 , 因 此 {B(z); 

0) 显然 是 一 个 马尔 可 夫 过 程 . 

(4) 所 谓 Gauss 过 程 是 指 所 有 有 限 维 分 布 都 是 多 元 正 态 分 布 的 随机 过 程 . 可 以 
证 明 布 朗 运 动 {B();t > 0} 是 均值 函数 2.(1) = 0, 协 方差 函数 yst) = min(t,s) 
的 Gauss 过 程 . 

由 于 布朗 运动 均值 是 0, 所 以 其 协 方差 函数 为 

y(s,t) = Cov[B(t)B(s)] = ELBG() BCs)] 

# t< s, B(s) = BO) + B(s) 一 B(Z), 且 由 独立 增 量 性 可 得 

ELB(1)B(s) | = E[B (2) ] - E{B()LB(Gs) — B(t)]} = EL[B:(1)]=t 

类 似 地 , 若 1 二 :, 则 EL[B(z)B(s)] = s. 再 由 上 述 定理 及 数学 归纳 法 可 得 B(7) 
的 任何 有 限 维 分 布 都 是 正 态 的 . 

“定理 6.8 (BGD Zo) 是 标准 布朗 运动 ， 则 对 于 任意 的 常数 > 0 有 

CDYCD = e HR 是 款 ; x 
DYO = Ba) T POE RR. x 
证 明 O) 对 一 上 有 
EL es? - 2 172 | B(y),y < s] = Ele al B( + B(0)—B(s) ]—a2 1/2 1BCy)，y <) 
一 eBo “WE{e al BCD)—B(s)] | BCy)， yy 过 中 
+ eB? t/2 EtesBO0)-B(9] y 
由 BO ~ N(0,t) 的 矩 母 函 数 ELAO] — e“ < co 得 
巨 [er&o-ao5]) 一 ez (ms) 
因此 
Eeo] By), y < s] = em 一 as/2 
(2) X| s < L AW B(s) #l BG) — B(s) 是 相互 独立 的 , 且 ELBO] = 0, 
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ELB: (t) —t|B(y),y < s] 
= E([B(s) + BG) — B(s) P —|B(y),y < s) 
= B2(s) + E(2B(s)[BGO 一 BC 十 [BC -BOP — t| BO) y < s) 
= B’ (s) + E([BG2) — B(s) P} 一 
= B’ (s) + @—s)—t 
= B’ (s)—s 
于 是 ,结论 成 立 . 
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6.5.1 等 价 变换 


ee Dn 
运动 : 
人 ) ,其 中 XG) = Bak) s i 
WY), 其 中 Y= BCe+ 用 一 BOD， Io 
(BAW, 1>0 n 
O ,0 
证 明 根据 定义 6. 8 来 证 明 . 很 显然， 随机 过 程 (1) ~ (3) 的 起 始点 为 X(0) = 
Y(0) = Z(0) = 0. 易 于 证 明 过 程 (1) ~ (3) 具有 独立 正 态 分 布 增 量 性 质 , 且 均值 函 
数 都 为 0. 只 需要 进一步 证 明 随机 过 程 (1) — (3) 在 任意 区 间 [s,1](s 二) 内 的 增 量 
的 方差 等 于 :一 即 可 . 
(1) Var[LX(CD 一 XC)] = ELX 一 XC)]2) 
= E[X° (2) ] — 2Cov[X (s) — X] + ELX? (s) J 
= č {ELB (t/c )]— 2CovL BCs/e’) ,Bi(t/e)] + ECB? (s/e2y]; 


OZW. a o), T Ze = | 








; t Š S 
dE 2 中 = 
s TTo 


š 
(2) Var[Y(O —Y(s)] = E([BGt+ h) — Bús-- hy]? 
= ELB’ (t+h)]— 2Cov[B(s + A),BG + h)] + ECB? (s + A) ] 
= G—+h)—2(s+h)+ (s+- h) =t- s. 
(3) Var[Z(¿) — Z(s)] = E(B 1/9 —sB(1/sy]°) 
== ELB 41/2] — 24Cov[B(1/s),B(/t)] + ë E[B2 (1/s) ] 
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= 32 +é. l =t s 
£ S 
因此 ,定理 得 证 . 
6.5.2 布朗 桥 


定义 6.11 设 {1B(7),t 宇 0) 是 布朗 运动 . 令 x o 
x BG) = BG) BA), o 
则 称 随机 过 E BG). < :<1 ) 为 布朗 桥 (Brown bridge). n 
因为 布朗 运动 是 Gauss 过 程 , 所 以 布朗 桥 也 是 Gauss 过 程 ,其 维 分 布 由 均值 
函数 和 方差 函数 完全 确定 , 且 对 任何 0 过 ;过 1 过 1, 有 
ELB(1)]=0 
E[B(s)B(t) ] = E{[B(s) — sB(1)J[BG) — 1B(1)]} 
= ELB(s)B(1) —1B(s)B()— sB B) + #sB2(1)] 
= s—ts—ts+ts = s(1 —t) 
此 外 ,由 定义 6.8 可 知 B(0) = B(1) ==0, 即 此 过 程 的 起 始点 是 固定 的 ,就 像 桥 
一 样 (图 6. 1) ,这 就 是 Brown 桥 名 称 的 由 来 . 








6.5.3 反射 布朗 运动 


“定理 6.10 如果 随机 过 程 {X(z)， + 之 0) 满 足 X(t) = |B], E 
射 布朗 运动 (在 轴 反 射出 来 )， ERNE o a u 


m (t) = EIXO]: = se Xe Fae 





VartX()] = Eo] (xo = 人 = a 


事实 上 ,反射 布朗 运动 可 看 作 是 一 齐 次 马尔 可 夫 过 程 ,状态 空间 Z = [0, + co), 
可 以 写 为 
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0 WEL 
考虑 到 布朗 运动 的 马尔 可 夫 性 和 它 关 于 +t 轴 对 称 的 随机 性 ,有 
PIXO) < y | Xt) = nX (t) = Ti st X tp) = Ta} 
= Pi— y< BU) <+ y | BG) =+ x BC) =+ x ,BL,) = x, 
= P{— y < BU) <+ y | BG,) =+ x,) 
因此 , 当 0 达 ;二 t 时 ,转移 概率 为 
PIXO =< y] X(s) = z) 
此 反射 布朗 运动 的 概率 由 布朗 运动 在 Ls,tj] 内 的 增 量 所 决定 ,假定 起 始点 为 状 
态 < 和 时 间 *， 因为 这 样 的 增 量 服从 N(x,o 7), 其 中 t= 二 1 一 s, 所 以 


P XG) Ay) = z$ = | eE du 
相当 于 


— _ y z 
PXW < <| Xi) ==) OE) ol Pa 
因为 转移 概率 仅仅 通过 t= 二 t 一 s 来 体现 : 和 ;之 间 的 关系 ,所 以 反射 布朗 运动 
也 是 齐 次 马尔 可 夫 过 程 . 





m,y = T= fs 


6.5.4 几何 布朗 运动 


H XO 一 e ”人 0 定义 的 过 程 {X(CD) ,会 0) 称 为 几何 布朗 运动 . 由 于 布朗 
运动 的 矩 母 函数 为 Ele] = es ,所 以 几何 布朗 运动 的 均值 函数 与 方差 函数 分 
别 为 

ECX (H= ElLe ] = e 
VarLX(C)] = E[ X° G) ]— (ELX) ] 12 
= E[ e” ]—e = ez —e 

早 在 1900 年 ,法 国 数学 家 巴 舍利 耶 (L. Bachelier) 就 在 其 博士 论文 4 投资 理论 》 
中 ,给 出 了 布朗 运动 的 数学 描述 ,并 提出 用 几何 布朗 运动 来 模拟 股票 价格 的 变化 . 
在 金融 市 场 中 ,经 常 假定 股票 的 价格 按照 几何 布朗 运动 变化 ,在 下 面 的 例子 中 可 以 
如 此 假定 . 

【 例 6.11】 股票 期 权 的 价格 . 

设 某 人 拥有 某 种 股票 交割 时 刻 为 了 ,交割 价格 为 开 的 欧式 看 涨 期 权 , 即 他 (她 ) 
具有 在 时 刻 工 以 固定 的 价格 氏 购买 一 股 这 种 股票 的 权利 .假定 这 种 股票 目前 的 价 
格 为 y, 并 按照 几何 Brown 运动 变化 ,计算 这 个 股票 期 权 的 平均 价格 . 

E EXT 表示 时 刻 丁 的 股票 价格 , 若 义 (T) 高 于 开 , 期 权 将 被 实施 ,因此 
该 期 权 在 时 刻 工 的 平均 价格 应 为 


65 常见 的 布朗 运动 的 变化 形式 161 





Etma SN CD -K,0]}= | PARCTY — K> uđu 


s loan 
J +s 
2 


lI 
*— 
s 4 


PIB) > l sa 





一 1 ig p e * T dedu 
/2xT- 0 JIn[OK+u)/y3J 
6.5.5 Ornstein-Uhlenbeck 过 程 


如 果 布 朗 运 动 过 程 对 于 描述 液体 和 气体 中 微粒 的 运动 是 完全 正确 的 ,那么 微 
粒 是 以 一 种 极 大 的 速度 在 运动 .为 了 克服 这 种 非 现实 的 假设 情况 ,学 者 Ornstein 和 
Uhlenbeck 建立 了 新 的 随机 过 程 来 描述 这 种 微粒 的 高 速 运动 . 

定理 6.11 设 {B(),t 写 0) 是 布朗 运动 ， a nea n C 
Ç ce, teo} 由 如 下 表达 式 定义 : Da 
MOA) se BE l JAR 
RZ HAHH o Fala > 0) 的 Ornstein-Uhlenbeck 过 程 ,简称 O-U 过 程 . 
UC) 的 概率 密度 函数 为 


l E E- 
fuw (Xx) = /(2o2 ) 


e * “° . =e s C-l SO 





2x 
E[UG5]= 0, Var[U(# | = 


6.5.6 带 漂移 的 布朗 运动 


定义 6.12 ”一 个 随机 过 程 被 称 为 带 漂移 的 布朗 运动 , 如 果 它 满足 以 下 

(DDO) 0 

DDA, Z= 0) 是 齐 次 独立 增 量 的 ; 

aaa a ca apaspa 

漂移 布朗 运动 的 等 价 定义 为 :{D(),t = 0) 是 一 个 漂移 布朗 运动 当 且 仅 当 
D(z) 的 结构 为 

D) = t + B(t) 

其 中 {B04),t 三 0} 是 布朗 运动 ,常数 p 为 漂移 系数 或 简单 飘移 . 因此 ,漂移 布朗 运动 
是 由 布朗 运动 加 上 一 个 特定 的 函数 组 成 的 . 这 个 特定 的 函数 是 条 直线 , 且 正 好 和 漂 
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移 布 朗 运 动 的 均值 函数 吻合 , 即 
m(t) = E[D(1)] = st 
如 果 条 件 (2) 和 (3) 都 被 满足 ,过 程 从 :二 0 和 w(u 关 0) 开始, 所 得 到 的 随机 过 
FED.) ,t > 0) 就 叫 作 平移 漂移 布朗 运动 . D, G) 的 结构 为 
也 , ( = u + De) 





一 维 漂 移 布朗 运动 的 密度 函数 为 
fow (z) = l se, — GO < wo £ > Ü 


V2rto 
漂移 布朗 运动 有 着 广泛 的 应 用 背景 ,比如 ,在 研究 计算 磨损 参数 、 控 制 成 本 、 生 
产 标准 和 资本 增 量 、 模 拟 物理 噪音 等 方面 . 总 体 而 言 , 漂移 布朗 运动 可 以 应 用 于 任 
意 线性 过 程 中 对 随机 运动 产生 持久 干扰 的 情况 . 
【 例 6. 12〗 实施 股票 期 权 . 
假设 某 人 有 在 将 来 某 个 时 刻 以 固定 价格 A 购买 一 股 股票 的 期 权 , 与 现在 的 市 
价 无 关 , 不 妨 取现 在 的 市 价 为 0, 并 假定 其 变化 遵循 具有 负 漂 移 系 数 一 w(wn > 0) 的 
布朗 运动 . 问 在 什么 时 候 实施 期 权 ? 
解 考虑 在 市 价 为 工时 实施 期 权 的 策略 .在 此 策略 下 的 平均 所 得 是 
(z=— A)P(zx) 
其 中 P) 是 过 程 迟 早 到 达 工 的 概率 . 于 是 有 
Plr) =ë", z> O 


的 最 优 值 是 使 (+ 一 A)e-** 最 大 的 值 , 易 见 它 是 工 一 从 十 元 . 
# 


4 A 6 


= 


. i Y Y i, 为 一 系列 独立 的 随机 变量 ,服从 同样 的 分 布 N(0,1), 试 证 明 ;{X， 
= 22Yi,n = 0,1,…) JERN HR. 
. Yo É Y i, 是 一 系列 独立 的 随机 变量 , 它们 的 均值 是 E(Y,). REA: X, = 
2;,[Y, -EY )]n 2 0) A Ë BC BF E] A. 
.证 明 : 具 有 独立 增 量 ,均值 为 常数 且 满 足 E[|X()|] <+, E 工 的 随机 过 程 
{X(z),t € T) 是 一 个 拷 . 
4. 设 工 为 一 个 随机 过 程 {X(z),t € T) 中 离散 和 和 连续 时 间 中 的 停 时 ,z 是 一 个 正常 
数 . 证 明 :L A z = min(L,z) 对 于 {X(t),t € T) 是 一 个 停 时 . 


. 设 {B(z),t 宇 0) 为 标准 布朗 运动 ,给 定 B(s),0 达 s 二 i, 试 计算 BG) 的 条 件 概率 


fo 


w 


a 
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6. 设 (Bi). t>0}, (BOA, 220) 2 # Z j s BJ $F yË $r Dl 36 34, 试 证 明 
(XG) = BO 一 B,(1)) 是 布朗 运动 . 
7. 设 {B(1),0 志 1 过 1) 是 布朗 桥 ,证 明 如 下 定义 的 随机 过 程 {2Z(1),t 宇 0} 
ZG) = G+ DB[ +) 
是 标准 布朗 运动 . 
8.2 (BG) t> 0) AREA HE, R B(1) + B(2) + +B) 的 分 布 ,并 验证 
(xo = B (F) A Co, 十 co) 上 的 布朗 运动 


9. 设 {1B(1),t 宇 0) 为 标准 布朗 运动 ,验证 XW = —p5B[r-) 0 <: 
是 布朗 桥 . 


A 


i 


$7% 随 拟 分 新 


在 数学 分 析 的 微 积分 内 容 中 ,连续 性 .导数 和 积分 等 概念 都 建立 在 极限 概念 的 
基础 上 . 关于 随机 过 程 分 析 的 研究 ,也 需要 建立 相应 的 随机 过 程 的 连续 性 .导数 和 
积分 等 分 析 概 念 ,同样 这 些 概 念 也 都 是 建立 在 随机 序列 极限 的 基础 上 ,这 一 部 分 内 
容 统 称 为 随机 过 程 分 析 , 简 称 随机 分 析 . 


7.1 二 阶 矩 过 程 与 均 方 极限 


定义 7.1 如果 随 机 过 程 {XCD) : € T) ;对 任意 t+ € 人 ,有 
m(t) = E[ XG) ]<+ so, DG) = EIXO -ma F) 一 十 ce 
则 称 该 过 程 是 二 阶 矩 过 程 . 二 阶 矩 过 程 的 协 方 差 函数 总 存在 , 且 为 
Covi X), Kt = EI E[ XG.) mG) J XG.) mG) ]) 
进而 其 他 相关 函数 也 总 存在 . 


二 阶 矩 过 程 的 均值 函数 和 协 方差 函数 一 定 存在 , 正 态 随机 过 程 是 二 阶 和 矩 过 程 . 
一 般 地 ,随机 过 程 的 概率 性 质 是 由 其 分 布 函 数 族 完全 确定 的 ,但 在 实际 问题 中 很 难 
确定 出 分 布 函 数 族 . 正 态 随机 过 程 的 一 、 二 阶 矩 可 以 完全 确定 其 有 限 维 分 布 .因此 ， 
在 很 多 实际 问题 中 ,只 需要 通过 对 随机 过 程 二 阶 矩 的 讨论 就 足以 了 解 随机 过 程 的 
某 些 重要 统计 特征 .为 简便 起 见 , 设 二 阶 和 矩 过程 是 复 二 阶 矩 过 程 , 且 其 均值 为 零 . 

二 阶 矩 过 程 的 相关 函数 具有 如 下 人 性质: 

(1) RIXA. € T} 是 二 阶 矩 过 程 , 则 相关 函数 

Rx Chu, ) = Rerata) 

# XO 是 实 二 阶 矩 过 程 , 则 Ry st) = Rx (tz ,ty), 即 相关 函数 是 对 称 的 . 

(2) ZME IERRA Ret) 具有 非 负 定性 , 即 对 于 任意 有 限 个 44， 
to," st € T fln 个 复数 41 ,4 ，,… ,4,, 有 
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5 SRi yE YAYA š = 0 


k=1 m=1 


Zh n 3 tE 8 F 3 28. 
【 例 7.1】 余弦 波 过 程 X(1) = Acos +0) ,1 宇 0, 振 幅 人 A 与 角 频 率 取 常数 ， 
相位 0 ~ U( 一 xx). 因为 


EXO J: = 上 Aš cost (az +0)z-d0< A, Vr 20 
AXO 是 一 个 二 阶 矩 过 程 , 且 
ELX] = 上 Acosta tO d0 = 0 
Ry 6st) = ELX) X (s) 一 l. A’ cos (ot + 0) cos (os 十 9) 于 dg 


= +A: cos[e(s— n) ]= + Azeos(awr) (<ç =s—t) 


7.1.2 均 方 极限 


对 于 概率 空间 上 的 随机 序列 {X, } ,每 个 试验 结果 e 都 对 应 一 个 序列 
X, (e), we e., X, (e)... 
若 该 序列 对 每 个 e 都 收敛 , 则 称 随 机 序列 {X, } 处 处 收敛 , 即 lim X, 一 XX, 其 中 X 为 


让 


随机 变量 . 在 实际 问题 中 ,这 种 收敛 性 是 很 难 达 到 的 . 因此 ， 下 面 介绍 几 种 在 概率 意 
义 下 的 随机 序列 的 收敛 定义 ,它们 不 要 求 一 定 满 足 该 序列 对 每 个 e 都 收敛 的 条 件 . 
¿E 7.2 如 果 合 lim X, le) = Xle) 成 立 的 。 的 集合 的 概率 为 1， 即 


Pie; lim X, (e) = Zo ， =1 
则 称 二 阶 矩 随机 序列 X, o) 以 概率 1 a - 阶 短 随机 灾 量 X(e) 或 称 
(X0) 几 乎 处 处 收效 于 Xe) , 记 作 X, “全 X | 
”定义 7.3 ”如 果 对 于 任何 e > 0 有 x 

x lim P(|X,() -XW |> e) 
则 称 二 阶 短 随 宙 序列 {X,(6)) 依 概 率 收 敛 于 二 阶 矩 随机 变量 X(o), 记 作 XX > x. 
“定义 7.4 ” 设 有 二 阶 矩 随机 序列 {X,) 和 二 阶 矩 随机 变量 X, 如 果 有 
Jim Ee| X, — XI = 0 

成 立 , 则 称 (x, } 均 方 收敛 于 XX, 记 作 x, Š x, 或 者 记 作 1 i mX, = X = 
JL mX = = X(l. i.m Æ limit in mean HRS). 
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在 以 上 三 种 收敛 定 义 中 , 均 方 收敛 是 最 简单 的 收敛 形式 , 它 只 涉及 单独 一 个 序 
列 , 且 均 方 收敛 可 以 推导 出 依 概率 收敛 . 以 下 讨论 的 随机 序列 的 收敛 性 ,都 是 指 均 
方 收敛 . 

定理 7. 1 《〈 柯 西 均 方 收敛 准则 ) 设 有 二 - 阶 给 随机 序列 (X, Ten 
变量 X， Wo } 均 方 收敛 于 X 的 充 要 条 件 是 — o 

x lim EUX, — XI — x 


证 明 略 . 
ZET? BRIXI T) } 都 是 二 阶 矩 随机 序列 J.U 为 二 “ 阶 矩 随机 变量 ， 
《ce ) 为 常数 序列 ,avb,e 为 常数 . 人 上 mX, =X, l. L mY, =Y, nr s s. 则 


(DL i. me, in， — s 


neo 


OL o x 
Li mle, U) = U; o 
(DLim(aX, +bY,) = aX +Y; x 
O Jim E(X.) — EQ) = = Ed. Lox, 


©, lim ECX,Y, o EXP) = EA. i a — mY. J 特别 地 ， 有 
x i lm EC] X. | J= E(X]? = EC [L m. T 





证 明 G), 2), 63) 由 均 方 收敛 定义 可 以 得 导 证 . 下 证 (4) : 
4 n 一 十 co 时 ,有 
E[|(aX, + bY,) — (aX 4 bY) |2] 
= E[|a(X, — X) +Y, — Y) |2] 
< 2a'E(| X, — X| +H 2E Y, — Y|?) — 0 
由 均 方 收敛 的 定义 知 (4) 得 证 . 
(5) 由 许 瓦 兹 不 等 式 即 可 证 明 . 
(6) 由 许 瓦 兹 不 等 式 有 
|E(CX,Y,) — E(XYÝ)| = |Et(X,Y, — XY) | 
= |EL(X, — X) (Yn — Y) + X,Y + XY,, — 2XY J| 
= |E[(X, — X) XY, —Y)] + EL(X, — X) Y] + ELY, — Y) X]| 
< |E[(X, — X)XY,,— Y)J|+ |E[(X, — X)Y]|+ | ELF, — Y)X]| 
< VEC(|X, —X[ )ECY, -YD + VEX, XEY 
十 /EC|Y, YDE XD) > 0 (24 n,m >p 时 ) 
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定理 7.3 “〈 洛 弗 准 则 ) 设 有 二 阶 乱 随机 序列 {X,) 和 二 MENER X.N 


(X, SARAF X 的 充 要 条 件 是 
| U im EZX, 5 co 


证 明 ”充分 性 : 
由 ECO eb 过 + |x. | 
= Ec|X,|?2)—2E(|X, X, |) HEQ X, |?) 
因为 lim E(X,X,) = C, 所 以 
lim EC| X, — X, | = C—2C+C=0 


n.m—-= + 


由 柯 西 均 方 收敛 准则 知 ,; X,} 均 方 收敛 于 X. 

必要 性 的 证 明 由 定理 7.2 的 (6) 知 成 立 . 

【 例 7.2】 设 {X,} 是 一 随机 变量 序列 ,X 是 随机 变量 , 若 V e > 0, 5 n+ 
BF, (X, PI|X,— X| >e} —0, N 4k X, 依 概 率 收敛 于 XX. 证 明 : 若 1.i. mX, = 


LA I=. 
证 明 l. i. mX, = X, N lim E| X, — X |°) 一 0, 由 契 比 雪夫 不 等 式 
Pi |X X| eya X, — X e 
T, 3 n+ m, EX, — X| 0,0] YVe>0, %4 Pi|X,—X|>e}—0, 
所 以 ,X, 3) 2 k $k + X , N kR J&k 2k + X. 
【 例 7.3] 证 明 均 方 极限 的 唯一 
证 明 设 {X(n)) 是 二 阶 答 随机 序列 , 义 ,Y 是 二 阶 矩 变量 , 且 lim Xn = X, 
lim X(n) 二 了 ,因为 
E{[Xm) —Y][Xm —Y]) 
= E[ X(n) X(n) ]— E[Y X n) ]— E[X(n)Y]J+ E (YY) 
对 上 式 两 边 取 极限 n 一 十 0, 左 边 用 XX(n) ->X 代 入 ,右边 用 X(Cz) > Y A, 
则 左边 为 
E{[XCn) Y] Xm Y] 
右边 为 











十 ce 
E[(X—Y)(X—Y)]) =E(|X—Y]?) 


E[ X(n) X(n) J— E[Y X(n) ]— EL[X(W Y ]+ EC(YY) 


n 


一 十 co =b ses = z 
— > EYY) = EYY) —E(YY) + EYY) = 0 
FA E(X—Y| 2) 一 0, 即 X 一 了 , 故 均 方 极限 唯一 . 
【 例 7.4〗 AY Ye 是 独立 同 分 布 的 随机 变量 序列 ,E(Y1) = z, DC ) = 


s + X(n) = LSY EA: i,m X, = p 
i=l 
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证 明 BA 
ELIX -pl I= E(| 4EY -| )= BE(| X1ey,— |°) 


= LBY; =pl 
n 





lim EL | Xm — a |2] = lim ECY, pl y= 0 
NH 二 cx i ee 


所 以 L; 1 m = 4 

此 例 又 称 为 均 方 极限 下 的 大 数 定律 . 

[@) 7.5) j I X.,.n > 1) Poisson 随机 变量 序列 ,证 明 : 该 序列 的 均 方 极限 
服从 Poisson 分 布 . 

WE BH 记 E(X) = A,E(X,) = A,+ A A lim X, = X, Pf vÀ 


nat 


lim E(X, ) = EU. i mX, ) = E(X) 


n— +° 


即 tima, = À 
neta 


设 m(1) 和 g(t) 分 别 表 示 X, fa X 的 特征 函数 , 则 
lim p, (0) = = lim E(e"*a) 


A t= lim 2, Ce =D 


= lim eè = eë, = exe D = olt) 


因为 特征 函数 与 分 布 遂 kaati Aol) # Poison PFARRER piaba aq, 
故 X IRA Poisson 分 布 . 


7.2 均 方 连续 与 均 方 导数 


7.2.1 随机 过 程 的 均 方 连续 


W (XG), € 了 T) 为 二 阶 矩 过 程 ,参数 集 T 为 直线 上 的 一 个 有 限 区 间或 者 无 限 
区 间 . 下 面 讨论 二 阶 矩 过 程 的 均 方 连续 的 性 质 . 
定义 7.5 设 (Xe 了 ) 为 二 阶 矩 过 程 ， 车 对 某 确定 的 +:€ TA Li. mXG 
+h) = X0) BD 
limE[ | Xt — XD 1 o ET 


则 称 二 PEBE (XG: € Ti 在 点 1 处 均 方 连续 s € TE ve € T 
处 都 均 方 连续 ， 则 称 {(X@)， tE T)# T ESHER. 
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定理 7.4 BAEREN R(X. € 工 } 为 二 阶 矩 过 程 ,Rx(na ,ts) 为 其 
相关 函数 ， tiot € 了 , 则 过 程 {X(2),z € 了 和 处 均 方 连续 的 充分 必要 条 件 为 
RG ,ty) E GDE. e 
证 明 ”充分 性 :车 Rxist:) 在 (t,t) 处 连续 ,由 
limE[ | XG + h)— X) |°] 
= lim[LRx (t+ htth) — RxCtstth)— Rx(tth,t) + Rx 0,0) ] 


则 limE[| XG +h) — XO) |] =0,tt+h ET 
必要 性 :如 果 limEL|XC 十 AD 一 XCD |°] =0,t,t +h € T.W hE T. 2 BJ (6) 
得 
,lim Rx (t st) = T ii X(t) ] = E[ XG) X)] = Rx (t,t) 
均 方 连续 准则 揭示 了 一 阶 矩 过 程 的 均 方 连续 性 可 由 其 相关 函数 在 普通 意义 下 
的 连续 性 来 确定 . 


【 例 7.6】 设 {X(1),t 宇 0),X(0) = 0 Z Poisson 过 程 , 讨 论 其 均 方 连续 性 ， 
解 因为 4X(CD) r> 012 Poisson 过 程 ,所 以 有 





=== i: Ë 
P{ X) — X(s) = k)= e 2 9 hauzo] sk = 0,1l, t >s 


As =0, JĄ E[ XG ]= ìt. 
当 s 二 t 时 ,有 
Cx(s,t) = E([X(s) 一 15]LXCD — M ]) 
= E([X(s) —As]J([X(s) —Aas]+- [XW — at ]— [X(s)—aàs]}} 
= E([X(s) —As]J*2)= D[X(s) P = ås 
X s >t, ži T $£ Cx(s,t) = àt 4k Cx(s,t) = Aminís,t) , WJ 
Rx(s,t) = Cx(s,t) + m(s)m(t) = Aminís,zt)4- A st 
由 于 Cri DULA Rx(s,)] 在 {(t,t),t 宇 0} 处 二 元 连续 ,所 以 ,Poisson 过 程 
{X(t),t 宇 0} 在 t 宇 0 时 均 方 连续 . 
【 例 7.7】 设 有 二 阶 短 过 程 {XX(1) ,t € T} ,Rx(s,1) 是 相关 函数 . 
证 明 : 若 Rx(s,t) 在 (t,t) 处 连续 , 则 它 在 工 X 开 上 连续 . 
证 明 若 RxGs'i 在 (zi) 处 连续 , 则 X(i) 在 上 处 均 方 连续 ,所 以 ,对 :ts 十 
h,t 十 hi1 ETA 
l.i.m X(s+ h) = X(s), Lim XG +h.) = X(0) 
JE HE Dr 2E i+ 42 69) 3) 2 |& Sk k. J 45 
im RxCs +hst+ hi) = „im ELXG +h) XG +h) ] 





= E[X(s) X0) ]= Rx(s,t) 
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Pp Rx(s,i) £ T X T k £ Ë. 
7.2.2 随机 过 程 的 均 方 导数 


定义 7.6 R(XW E TAT MENE. eoo 
“区 间或 者 无 限 区 间 . é MEIE De T s 
x limE o xo]- 


Lim — aip, mi xo 6 kasna. maD 为 


h0 


XG) 在 点 + 处 的 均 方 导数 ， mi XO). 


# XG) 在 (一 ce， 二 ee) 上 每 一 点 处 都 均 方 可 微 ， 则 称 XG) # T € 
(一 co ee gini 2. GO 也 是 一 个 随机 过 程 ,与 X(7) 在 同一 概率 空间 
Je: 
类 似 地 ,可 定义 {X' O, € T) 的 均 方 导数 过 程 : 
(XG r€ Ty, {RODE € Th 
将 随机 过 程 的 均 方 导数 转移 到 实数 域 进 行 讨论 分 析 ,引进 广义 二 阶 导数 概念 : 
”定义 7.7 BOTER SOD EGD 处 广义 二 阶 可 微 ,车 极限 
{G+ A tA) ws Aso) fettan ew | 
s Aso — AAs -o a 
存在 ， 称 此 极限 为 rO.) EED a 阶 导数 ， x 
广义 二 阶 导数 是 二 重 极限 ,而 二 阶 混合 偏 导 是 二 次 极限 ,一 一 般 情 况 下 两 者 不 相 
x. 不 加 证 明 地 给 出 如 下 的 广义 二 阶 导数 存在 的 充分 条 件 ; 
定理 7.5 (广义 二 阶 导数 存在 的 充分 条 件 ) 若 二 元 函数 f(s,7) 关于 s, 1 3 
-PRSTE - ma stss, , 则 Gs.) 








广义 二 阶 导 数 等 于 二 阶 混合 偏 导数 , 即 fD = f. G.D. 


aa 6 〈 均 方 可 微 准则 ) 2 (XG). C T — Coroa- [EE 

a Rx (s50) 为 其 相关 函数 ， 则 过 程 XG) 1 s '''* 
Rx(s,t) Eost) 处 的 广义 二 阶 导数 存在 — 
证 明 ”由 均 方 收敛 定义 及 准则 可 知 , XO, ETE = to 处 均 方 可 微 


aiim X(to + At) — X (to) 存在 ， 
Pere At 


a limE X(to + At) — X (to) a X(t As) — X(t) 
A At As 











存在 ， 
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= lim [R (n ++ At, o 十 As) — Ry Go + At, o) — Ry (to ;to 十 As) + Rx (to . 


Aro 
—0 


OJEE, 即 RyCs,t) 在 (zo sto) 处 广义 二 阶 可 微 . 
推论 7.1 二 阶 矩 过 程 {X,,z € T) 的 相关 函数 Rx(s,t) IERE TEG, 
1) AAO LIET, W R CEDR CEt) ,Rs (s. RY (s,t) 在 TX 了 TT 上 均 存 在 ,而 且 
(1) FOTEX t € T) 的 均值 函数 为 


me(ty== EOU = AEX.) ER, 


(2) 导数 过 程 {X,,t € T) 的 自 相关 函数 为 
大 Cs ECX X. = Ri D= Ri lst) 
(3) 导数 过 程 {X t E T) 与 {1X,.,t E T) HEHA RRO 
Rygg (si) = ECX RY = R lsa) 
R (s4) = ECX, X D) =R ls;t) 


证 明 (1) mgt) = ECX!) = E|. i. m XG TA XO] 























Ar 0 At 
iag XG T Ai — X) 
Ma At J 
— lim[ Ct ADD — mx Ct) - === PN 
Ar—0 At 
(2) Re(s,) = ECX'X') = E[l i. m Toran Ao EXO] 
ne — limE[ X G + As) X” M X(s) X' (OJ 
As— 0 As 
i lim STAs D -R 6D _ R” (sit) 
As—=0 As 
(3) Rerah = ECNUX = MT a Xo . X(1)] 
As 0 aa 
li BL s+ A Ge, — X (s) XA 
Ax-=0 As 
= frm Rx (s+ As,t) — Rx(s,t) wa R'.(s,t) 
As =0 As 


类 似 地 证 明 第 二 个 等 式 成 立 . 


定理 7.7 均 方 导数 也 有 类 似 于 普通 函数 导数 的 性 质 , 不 加 证 明 地 归纳 
如 下 : 


(1) 均 方 导数 具有 唯一 性 . 
(2) 任 一 随机 变量 X( 或 为 常数 ) 的 均 方 导数 为 零 ， 


OEKO € T). YG), € 本 } 是 两 个 均 方 可 微 的 随机 过 程 ,a, 5 为 两 
个 常数 , 则 aX (2) 十 bY(z) 也 均 方 可 微 ,县 


172 第 7 章 随机 分 析 





[aX G) + bY(2) 7 s a) + bY' G) o 
w 设 (X(D)， iE P fO 为 一 个 普通 的 可 微 函数 ， 则 exo, 
也 均 方 可 微 ， Jai U 


doxa -Oxo o a 


(5) 随机 过 程 若 均 方 可 微 ， 则 必 均 方 连续 ， 反之 不 然 . 
显然 ,由 均 方 可 微 的 定义 知 
limE([ XG + At) X)]} 


Ap->0 








= limE 


AL 一 (0 


k (At)? = EIX’ OF} .0 =o 
(6) 若 二 阶 矩 过 程 {X(D) ,te 了 ) 均 方 可 微 ， C 为 常数 或 随机 变量 ， 则 
xO Gl SX) 
(7) 着 二 阶 多 过 程 (X XG), € T)EË n 次 均 方 可 微 的 ， 则 {XC :ee TE: 
处 的 > — 2 ss jl x 
CX) 
A a _ de eo 
即 求 均 方 导数 与 期 望 运算 可 交换 顺序 
〖 例 7.8〗 设 有 随机 过 程 {XCD),tE [0， 1J) ,定义 


PIXO = 0)= LXO = Yp <: <j = 1,2,-. 
其 中 人 Yi) 是 独立 同 分 布 的 随机 变量 序列 ,E(Y1) = 0,D(Y,) = 1,34 XG) 的 均 方 
可 微 性 . 
解 由 





EL[LX(1)]= 0 
Rx(s,t) = E[ X(s) X(:) ] 


MON Z <t <j = 1,2,-- 
Os 其 他 
可 知人 2RC0， 0) = 0 = ÊRO, 0,2 2 RO, 0) = ZRO, 0) = 0,42 Rx (s,t) 不 是 


二 次 可 微 的 ,这 是 因为 有 
a 
Z RGD = ERGs) = ELX 9X0] 


z ii [iim R(s+h,t+ h )—R(s+ Ah, — RGs,t h.) — 





hsh, 0 hy 0 hi 


ER hi 一 几 , 则 上 式 成 为 
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h— 0 Bš s, h? sss 





lim [R(h,h)—R(h,0)—R(0,h)+R(0,0)] _ 1 


Th XG) 不 是 均 方 可 微 的 . 
【 例 7.9〗 已 知 Rx(r) = e ,如 果 Y(D = XG) 十 X (7), 求 Rr). 
解 依 相 关 函 数 的 定义 ,有 
Ry(z) = E[Y(t)Y(t—7)] 
= E{[X(2) + XXGE—7) + X'G — z) ]) 
E(XG)XG— 2) +X DX mt) + XX) XKX G — z) ) 
= Rx (t) — Rx (z) + R'x (z) — R'x (z) 
= Rx(r) — R" (z) = (3 —4Z)e 
【 例 7.10] 证 明 : 维 纳 过 程 {W(t),t > 0) Z 33) 2 sJ #- 65. 
证 明 Y € [0, + co), #23it4 W(I) 在 to 处 均 方 可 导 , 则 存在 随机 变量 


Y ,使 得 lim W (Cto +o — W(t) 


(ho), 0 < h, — 0, 使 得 


| 


=Y, MYK} TER, MA m |Y | —+ <o, E # # 3 


W Cto € h,) — W(to) 








ks h, =e 
. Wito + h,) — W(&) 
ki: — | 
S Xto +h) — X(t) 1 
k Ye> 0 INSI, H n>N aA P] | Ah slsp 





AAA nk, AAW t + h,)—W(t) ~ NO, h,), èk 
W Cto + h,) —W (to) 

s/h 
由 正 态 分 布 的 性 质 知 , 当 E 充分 小 时 , 式 左边 的 概率 为 
1 | exp[ 一 其 ]dz 之 十 
ËSE Tl 20 2 


这 与 h, 无 关 , 从 而 推出 矛盾 . 所 以 维 纳 过 程 是 非 均 方 可 导 的 . 


N(0,a2) 








7.3 352 3R> 


本 节 主 要 介绍 黎 曼 意义 下 的 均 方 积分 概念 ,进而 简单 介绍 斯 蒂 尔 吉 斯 均 方 积 
分 的 定义 . 
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定义 7.8 设 {X(CD)，z € 了 ) 为 二 阶 矩 过 程 ,/(z) 为 定义 在 上 的 任意 确定 
的 函数 ,[a, p] cT. 将 区 间 [a, p] 分 成 个 子 区 间 , 分 点 为 
ee ee o s, fe 


j A, = max (t — t) EMA 
So DX a =i), N ur < Bean] 
Fli i. mS, Praa 个 于 区 间 的 分 法 及 wx 的 取 法 无 关 ， 则 称 此 极限 为 


FOXO 在 区 间 [a， bl 上 的 均 方 积分 af FOXO de. 此 时 也 称 fO) XG) 
在 [a, b] ERD 均 方 积分 可 积 的 , 即 > 
| roxcodu ai 1 = Li we on 
特别 地 , 当 /02) = 1,: € [ab] MI x 
de a 


REER 


称 为 随机 过 程 {X()) ， tE T)f#[a,b] 上 的 均 方 积分 


定理 7.8 ( 均 方 可 积 准则 ) 设 随 机 过 程 {X(O),e € T), SO 为 定义 在 工 
上 的 任意 确定 的 函数 , /0)X (7 Ela, b] 上 均 方 可 积 的 充 要 条 件 为 二 重 积分 


roroRsepad — 
存在 ,其 中 Rx(s,1) (X0. € T)8 B 3B2X 8 S. 


证 明 充分 性 : 若 f(s) 了 (1)Rx(s,t) 的 二 重 积分 存在 ,对 [a,bj] XLa,bj] 的 任意 
分 割 
a = s < sí < *** < s, = b,a = t < h, < *** < t, = b 
RAIER Cursu) E (sa s | X Giot] =1,2, ,m;ij 二 1,2,…,n), 有 


b fb 
| | 7eoyepRxcvpdsd = tim D D f f, )Rx (ur u; ) As, At; 


Ao k=1 j= 


存在 ,其 中 As = max Asks As, = Sk — Sei At = maxAtj s At; = t; — tji 
1<k<m 1<;j<n i 
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上 式 = lim >) PEL XG) fX As A, 


Arois i j= 


= limE[ X) FDX As Df Xa] 


和 
Li mD (u) XO) An 
存在 , 即 f(z)X(z) 在 [a, b] EINTR. 
必要 性 :由 洛 弗 判别 准则 知 ,车 均 方 积分 | AOX Ode 存在 , 则 下 列 极限 存 
在 , 且 
limE[ $) fD XC) hs Dx Az; | 


arat 


š E| f OXO ds| FOXA | 


b rb b fb 
= J | FD FO EL XI XG dsdr = | | fO) FO Rts, tdsde 


推论 7.2 车 随 机 过 程 {X(),t C T} 的 自 相关 函数 Rx(s,t) 在 [a,6] X [a,b] 
上 可 积 , 则 XG) Elab] 上 均 方 可 积 , 且 


b 2 b fb 
E| [xoa ]= f | Rxcsoasar 





推论 7.3 EXO Elab] 上 均 方 连 续 , 则 XO Elab] 上 均 方 可 积 . 

证 明 根据 均 方 连 续 性 准则 可 知 ,，{X(z),t ET} 在 La,b] 上 均 方 连续 ， 
(XG. € T} 的 自 相关 函数 Rx(s,7) 在 La,5]XLa,b] 上 连续 ,于 是 Rx(s,t) 在 [a， 
b]x[a,b] EWER EmA XO) Elab] 上 均 方 可 积 . 





类 似 地 ,可 以 得 到 无 穷 区 间 上 的 广义 均 方 可 积 的 充 要 条 件 : 
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| i b H b m 
证 明 E [xoa =| [RxGs,Ddsdt 

| | Red a = | |ELXC) XG | dsdt 
<Í (ECL|XC) | JELI XC) |*]}tdsdt 


v i 2 b 2 
LEXW |°) Jaz) = Í | X) | de) 


特别 地 ,车 {X(z),t € T) Æla, b] EIDES, MM 
E [xoa Te M =M= mEt ij 


a<r<b 











El FOX Gdr |= ELL i mY FG) XGa An] 


A=0 k=l 


A-=0 


= im S Yr WEL XCayY |z, 


| 


| 


lim Pfu) mr Gae) an = = i f Dmx Ga) d: 


A->0 





类 似 一 般 函 数 的 歼 曼 变 上 限 积分 的 性 质 ， 不 难得 到 黎 曼 均 方 变 上 限 积分 的 性 
质 如 下 : 

w XO) Elab] 上 均 方 连续 , 则 其 在 [La,5] 上 的 均 方 变 上 限 积 分 Y(z) 在 [a,6] 
上 均 方 可 微 , 且 有 


a) [xoa “= N 


DE | Xds = | ELX(s)Jds( 数 学 期 望 和 积分 可 以 交换 顺序 ); 


(3)Ry(s,t) = "| Rs (u,v) dudv. 


利用 黎 曼 均 方 变 上 限 积分 的 性 质 ,类 似 于 普通 积分 中 的 牛顿 - 莱 布 尼 效 公式 
的 推导 ,5 可 以 得 到 均 方 定 积分 的 计算 公 SAAT: 


po 
Wome 





证 明 ”因为 X'(z) lab] EIDEL, 所 以 有 [x (s)ds 在 [a,6] 上 均 方 可 
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导 , 且 [| xcods | = Xa 
即 [fx oas- xe ]' = 0 
故 | x ods =x 二 C,C 为 常数 ,t € [a,6], 进 而 
[x ods = Xa +C 
令 上 一 w, 得 C =— X(a). 8 t = b #8 
[xoa = X6) 一 无 (ay 

【 例 7.11] 设 (X(1),1 宇 0} 是 强度 为 A 的 Poisson 过 程 , 令 M(T) = 

T 
于 | X(CD)dt, 求 E[MCT)] 和 D[M(T)]. 


解 AA 
Rx(s,t) 一 下 [XCS)XC)] 一 Cx(st) — 22 st HA st +A? st 
= Amin{s,t}+ à?’ st 
Fiva ECX?) ]= Rx (t,t) <+ co, E Ry(s,t) 在 [0,T]X [0,T] 上 黎 曼 可 积 ,并 有 
E[M(T)]= +Í E[X(1) Jd: = +Í Xdt = a 


T:D[MCT) J= NE EE | [f Amin tsst) dsde 


0 


=a[f ( (| sas) d+ ff (| ids)dt |= ia T> 


故 D[M(T) ]= +AT 


【 例 7.12】 设 X(1) 二 2A?1, 其 中 人 A 是 随机 过 程 ,ECA1) <+oo, 求 | Xd. 
RO BA Rs) = E[X(5)X()] = EGA: g) = 44E(A') 连续 ,所 以 
| xar 存在 . 若 在 定义 中 取 Wk = 六 Gu +), H 


4 一 1 nl 
NYX) Cn 一 tt) = > 724? T Cha Fi — t) 


k=0 k=0 


= A?’ (£ —0) = Ar 
故 [xoa 三 f 2A’tdt = A? Ë 





7. 3.2 Až m E MC Stieltjes) 均 方 积分 


定义 7.12  (Stieltjes 驳 方 积分 入 设 各 Ce z 6 TA MEN J. JO 3 
定义 在 工 上 的 普通 函数 , 工 去 [a ,oO. 将 区 间 [o ,Oo AGAN 
2 4 a m 
WA, = = max (t Sp). 作 和 式 
DY fe LX )— XG 1, 其 中 u € Care a 


如 果 A, — 0 时， Li 小 - m(Z, 三 之 存在 ， 则 称 Z 为 /0) 关于 XG) #[a,b] E 


的 斯 落 尔 吉 斯 均 方 积分 , 记 为 2 二 [waxe. 
以 下 不 加 证 明 地 给 出 斯 蒂 尔 吉 斯 均 方 积分 的 可 积 性 准则 和 积分 性 质 ， 


定理 7.12 (可 积 性 准则 ) 设 { XG), € fab 为 二 阶 矩 过 程 ， 其 相关 函数 
ARG Df) 为 定义 在 [a,6] 上 的 普通 函数 . 若 二 重 斯 蒂 尔 吉 斯 均 方 积分 


[T Ofod <+% 
则 AO 关于 XO Elab] 上 的 斯 带 尔 吉 斯 均 方 积分 | fax 存在 
定理 7.13 ESO 关于 XG) 在 [a,6] 上 的 斯 蒂 尔 吉 斯 均 方 可 积 , 则 有 
CDE[| fax | | f C2) dECXC)] = [ayami 


DE| [roxo] ]= [re ro TORD. 





有 限 区 间 上 的 斯 蒂 尔 吉 斯 均 方 积分 的 定义 和 结果 也 可 以 类 似 地 推广 到 无 限 区 
间 的 情况 ,读者 可 以 自行 完成 ,此 处 略 . 


J A 7 


(XG). € [a,b]) JZ NERE, BJ dë p EXO] — a + Ë , k 3 2 8 8⁄2 31 
Crist) = el nl. AYO = X0HD- XO, REYON 为 平稳 过 程 ,并 求 
它 的 均值 和 相关 函数 . 

. 设 有 二 阶 随 机 序列 {了 X(n)), {XC(n)) 的 相关 函数 为 Rx(n,n) = ELX(m) 


X.) ]. 如 果 有 序列 {anton = 1,2,…, 并 定义 Y(n) = > arX(k), 则 在 什么 条 
k=1 


= 


Do 
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件 下 ,Y(n) 是 均 方 收 化 序列 ? 
3. AXO) 是 平稳 过 程 ,相关 函数 为 Rx (7). y= f XCDdi, 其 中 T> 0,a EX 


数 . 试 证 EC|Y|2) =f T- [eR Geyae, 

4. 设 有 二 阶 随 机 序列 {XC(n)} 和 二 阶 矩 变量 X, fO n) 是 普通 函数 , 且 满 足 李 普 希 效 
条 件 | f(D) 一 fw)| 过 M|u 一 v|, 其 中 M 是 一 正常 数 ,证 明 ， 

ii mf(X.) = FOOD 

5. 证 明 : {XX(z),t € TIT) 在 上 一 0 处 均 方 连续 与 其 协 方差 函数 Cx (z) 在 t= 二 0 处 连续 
等 价 . 

6. 设 {X(t),t €E 人 丁 } 是 实 均 方 随机 过 程 , 求 其 导数 过 程 {X'(t),t € TIT) 的 协 方差 函 
数 Cx (s,t). 


# 5 2 


习题 2 
1. XO 的 密度 函数 


所 以 均值 函数 
mx (1) = i Er dz = af (F) e GD a= = af e dy 
= | esas = m(Ž) 
与 :有关 ,所 以 {X(1) ,二 0) 不 是 弱 平稳 过 程 . 
2. XG) 的 密度 函数 








fl ) 1 一 CE 
(z) = e 2t 
V 2zto 
所 以 均值 函数 
+= 了 re) 
wef e 23 dz = 
mx _ a x A 
方差 函数 





VarLX(D ] = S: x° = e EY dr = øt. 
"s nio 


3. (1) 均值 函数 
mx (t) = EL[X(1)] = ECA)E[cos(oot + 8) ] 





= E(A) 支 | sina Fo)dp 一 一 ECA) [cos(a 十 Jo]|# = 0 


2n 
相关 函数 
R(s,t) = E{[LAsin(w + @) [Asin(w + @) ] ; 
2x 

= EAD) 去 | sintas + @)sin(az + @)dg 

= EtA? } =É A (coslo — s)]— cos[wls +t) + 2ọ]} dp 

= FECA? cosut — s)] 
协 方差 函数 


CU ty = RO) =0 = 于 ECA:)cos[w(t 一 5] 





(2) 当 1= 二 0 和 t= 二 1 时 ,X(0) = Asing 5 X(1) = Asilo +p) 不 同 分 布 , 故 {X(1) ,i E (一 co， 
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十 ce)} 不 是 强 平稳 的 .但 由 (1) Hl mya) = 0 ELX (u) ] = RGt,t) = + ECA) < 十 co; 


C(s,t) = 去 ECA?)ecos[Lw( 一 人 ] 仅 与 时 间 差 :一 s 有 关 , 所 以 {X(1) t E (一 ceo, 十 ceo)}) 是 弱 平 


稳 的 . 
4. 由 2.3 知 ,车 {A(?) ,1 € (— so, + so)) 是 弱 平 稳 过 程 , 则 
DXA 的 均值 函数 mx a) = 0. 
(2)X(2) 的 相关 函数 
R(s,t) = E([ACs)sin(as 十 @6)][LA(CD)sin(wt + 6) ]) 


2r 
= ELA(s)A()] +f sin(as + @)sin(az + g) dg 


ELACA] =É Z Ícos[o(i— s) J — cos[o(s+ D + 2g])dg 
TJ 0 


= 于 cos[o(t 一 9]E[ACD)A(D] 


{AG ,1 E (C so, + co)) 是 弱 平稳 过 程 时 ,E[A(s)A(1)] 只 与 1 一 :有关 , 故 R(s,t) 只 与 1 一 
s 有 关 . 


(3)E[X: (1)] = RG, = ELA: o] <+. 


由 上 知 ,{X(1) t € C— so, + co)) 是 弱 平 稳 过 程 . 


XC) 的 均值 函数 


mx (t) = > Ja E[sin(a2 + $; )] = 0 
i=1 


X) 的 相关 函数 


RCs) = ELXCD)X(CD)] = ElL J aisinat + @;)J[ aisinas + @,)J) 
i=l i=} 


= E[ Ñ Jat sin(az + @,)sin(os + @,) + Daiajsin(o + @,)sin(as + @,)J 
=1 


= FX eeos[eG — 91 
XO 的 协 方差 函数 


由 过 
C(s,t) = R(s,t) — mx (t)mx (s) = F Èi eos[e(: — s) 1 


1, n< s< ntn = 0 19 ss 


. (2) C(s,t) = | 
0， 其 他 

(3) 不 是 

. 证明: 

(1)mz(t) = cos(az2) EL X(t) ] — sin(w )EL[LY(1)] = 0 


DZO 的 相关 函数 
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Rz(s,1) = E[Z)Z(s)] = cos(wt)cos(ws)EL[X(t) XC(s) | sinCot )sinCws )E[Y (DY Cs)] 
— cos lat )sinlæas) E[ X(2)Y(s) ] — cos(ws)sinCot )E[LX(s)Y (7) ] 
= cos(a )cos(ws)C(t— s) + sin(ay )sin(es)C(t — s) 
= cos[ o (t — s) ]C(t— s) 
ODZ) 的 协 方差 函数 
C;(s,t) = R;(s,t) — mz(t)mz(s) = cos[w(t— s) ]C(z — s) 
8. (1) QE[ X° (¿) J] = E[sin° (dy) ] < 1 
mx (t) = E[sin(dy) ] = 0 
@C(s,t) = E[ sin(d)sin( s) J 


= F QL sint yaitu yda 
ô 2n 


2a 


(cos[u(t— s)] — cos[ult + s)]}du 


lI 
zl- 


1 
2 


Oy £ s 
H 0.0.0 HLX) ,t = 1,2,3} 是 弱 平 稳 过 程 . 
4 t= 1 At= 2X) = sing 5 X (2) = sin(2@) 不 同 分 布 , 故 {X(CD) ,t= 二 1,2,…}) 不 


是 强 平稳 的 . 
0, t= 二 0 
(2) ELX(#)] = = 
hı cos(C2rz) ， £0 
2rt 


HXO) t> 0) 不 是 宽 平 稳 过 程 ,而 XO 与 X(1) = sing 的 分 布 函数 不 同 , 故 {XCD， 
t> 0) 也 不 是 严 平稳 过 程 . 
习题 3 
Losa 
1. P(x(+)> 2) = > £ t ) =l 
2. (1) 假设 ;二 + 
ELNO NG(s)] = E(N(O[N0G) — N) + N(0]) 
= E{N(DLN(Gs) — N(0) ]) + ELN: (8) J 
= E[N JE[N(s) — NG] + DEN] + (ELN) ])2 
三 ts 一 起 十 本 十 A 二 十 LL 
所 以 , 协 方差 函数 
C(s,u) = ELNCDNC)] 一 ELNCO]ELNC)] = 26 HAt — ìt + Às = àt 
同 理 可 证 当 一 上 时 ,CCs,z) = As, 
故 CCGs,t) = Mmin(syz). 
3. 由 齐 次 Poisson 过 程 的 可 分 解 性 知 ,12:00 ~ 14:00 通过 该 十 字 路 口 ,但 是 忽视 指示 牌 “ 停 ”的 
车 辆 ,服从 强度 为 一 40X0.8%% =0.32( 辆 /h) 的 齐 次 Poisson 过 程 ,其 以 12:00 作为 0 时 刻 ， 
则 在 12:00 ~ 13:00 间 至 少 有 一 辆 汽车 忽视 指示 牌 的 概率 为 
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(0. 32)° e 0.32 
0! 


5. (1) Æ 12:00 一 16:00 之 间 到 达 加 油 站 的 平均 车 辆 为 
m(4) = [aya = fe- u+ 32 )dt = 64 
(2) 在 12:00 ~ 16:00 之 间 至 少 有 40 辆 车 达到 的 概率 为 
PING) 一 NGL) <40) = 1 一 SPINO NG) =i) =1 =e = 0.89 


i=] i=] 
6. (DENON Cs +) = E(NGO[NG + O — NOD + N(0)]) 
= E({NWLN s+ ) — N(0) ]) + E[N2 (z) J 
ELNO JELN(s) ] + DLN] + (E[N(t) ])2 
= ts + 1 + À? Ë 

(2)E[NG(¿+ s) | N(s) = m] = E[NG + s) — N(s) + N(s) | N(s) = m] 

= E[NG +s) — N(s) | NGC) = m]+ E[N(s) | N(s) = m] 

= àt +m 
因为 P(E[NG:+ s) | NGs)] = E[NG +s) | NG) = m] = PING) = m) 
所 以 E[ NG + s) | NGC] 的 分 布 列 为 


P{E[LN(t+s) | NGC)] = àt +m) = 


PIN(1) -<N(0) = 0}=1— = 0. 2739 





Qs" on 
m! 
(3)%:=s+A,AD>0 


Ë 
PING) < NGCD) = PING + A) 一 NGCD) > 0 - x QO on 1 








(4)0 < PINO 一 NG) >e} SPINO — N) > 1) 
而 
limP{N(D) — N(s) > 1) = 1— limP {N(t)— N(s) = 0} 


ts t: 


=1—lime* 一 0 


1s 


所 以 limP{NCD) — N(s) >e} = 0 


Is 


7. f H T~ el) 4# 


PT >it | T> xy = PIT>n Tt T> h) 


PIT =h} 
emt Hg) 


= Pan =e” = P{T >t} 








8. N, G) 的 到 达 时 间 间 隔 W, 的 密度 函数 为 
Are, £0 
fe G) = 
0, 其 他 
k 
PIN, (0) =, = ÈD e 
所 以 
p= P(N,(T,) — Ny (T, i) = k)= PIN(T,— T, 1) =k)= P(N,(W,) = b) 


十 cc +o k 
= j. P(N) = k) f. dt =| QD! nia, ed 
0 








Ë! 
证 | ETETE AA T+1) À À 
一 一 | ea d= Loa ° 
k! Jo k! lài tày Al + Àz ta 
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习题 4 
pass P paq bq q 
0 0 z 2 
neee Ë wl pa = r ta bq Ç 
b q 0 0 P Pq bq q 
0 0 qp P pq pq q 


0.25 0.375 0.375 
4.p = |0.375 0.25 0375|, 加 (3) = 0.25 
0.375 0.375 0.25 
5. P” = (0.42,0.26,0.32),PT = (0.426,0. 288,0. 286) 
6 DG = 41,2,3) G, = ) 为 两 个 遍历 状态 闭 集 . 
(2)C = (1,2,3) yaaa. N = (4) 为 非常 返 态 . 
(3)C = {0} ,Cs = (b) 是 吸收 态 闭 集 ,N = {1,2,…,b 一 1} 是 非常 返 集 . 
7. N= (1,25 i = {3,4,5},C: = {6,7} 是 正常 返 闭 集 . 由 转移 矩阵 
0.6 0.4 0 


10 7 
可 解 得 C, 的 平稳 分 布 为 {0， 0,23 23.28050). 


同 理 可 得 C, 的 平稳 分 布 为 (0,0,0,0,0, 吝 ,二 }. 
1 ) Í l 1 1 1 
8. (1) fi = NQ {i = gA fi = yt P = >, fi = yf = g 
C fi = PY sf = ofi? = qiq:qs fi? = i f? = piq fi? = piq. 
9. ri = e in .J 之 1,ro = = 
1 bi 
1+ 
>” II qi 
1 2 
a 
-|2 5 2 
10. (1)P = 9 9 9 
2 1 
0 3 3 


(2) AF I= (0,1,2) 是 有 限 链 ,T 中 所 有 状态 是 互通 的 , 且 状 态 0 是 非 周 期 的 , 故 (X, ) 为 遍 
历 链 . 


Om = — 


(m — <A 1 : 
lim pi = =s lim pr 


n— + 


13. (2)m 一 0.1788,m = 0.3613,m = 0.3426,z, = 0. 11173. 
(3)m = 8.53( 天 ). 
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习题 5 
3. 由 题 设 知 , 柯 尔 莫 哥 洛 夫 向 前 方程 为 
p's (t) =— p; (1) +0. 5pij- £) + 0. 3p (t) 
由 于 状态 空间 为 工 = {1,2,3), 故 
ps Ct) 十 Pija (t) + pt) = 1 


所 以 
p'u t) =— p; (t) + 0. 5[1 — p; (t) ] 
_—_ 3 Š 
=- b (D + 0.5 
解 上 述 微分 方程 得 
pi (t) = ce-¥ + 
由 初始 条 件 
i=j 
pi (0) = 
， Æj 
确定 常数 c 得 
ll i=j 
3 3 ka si 
pi (t) = 
tet EE 
故 其 平稳 分 布 为 


万 = lim py (t) = + j= 1,2,3 
4. 设 服务 员 的 服务 时 间 为 T, 则 由 题 意 知 工 服从 指数 分 布 ,其 概率 密度 函数 为 


fay = s 
Oy +z 0 
W'L0,z] 内 到 达 的 顾客 数 为 XO, 
PIX = xy = He = Dd 


nl 


(1) 在 服务 员 的 服务 时 间 内 到 达 的 顾客 的 平均 数 为 
EIELXWJIT= 7) = | [2 Cys l a 


(2) 在 服务 员 的 服务 时 间 内 无 顾客 到 达 的 概率 为 
po = J ev + ue “ dt 二 7: 


5. (1) 记 机 器 正常 工作 状态 为 0, 维 修 状态 为 1, 则 状态 空间 为 {0,1}. 
(2) 由 指数 分 布 的 “无 记忆 性 ”, 可 求 得 Q 矩阵 为 
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(3) 向 前 或 向 后 退 方程 及 初始 条 件 为 
HR Jael 
人 


P{X(0) = 0} 一 加 (0) = 1 


P{X(0)= 1} = p1(0)=0 
(4) 解 上 面 的 微分 方程 
LL e tay 
po (t) = fi +z UE +z 
a Ë <= À lty) 
Pw (2) à +u rte 
由 
PIXO =j) = p = Dpi(0)ps(t) = py) 
€ 1 
可 求 得 
as e Qty: 
po (t) itg EETA 的 
e Qtp) 
po (10) Fe # 


(5) 根据 以 上 所 求 , 求 极限 即 有 


Jim po (2) = EF 会 pb 


im pio (2) EEF 会 po 


lim po (lt) = — ô p 


à +y 
另外 根据 上 面 的 极限 性 态 讨论 ,由 
Dprqy =D 
kEI 
22 =1 
k€ 1 
同样 可 以 求 得 
= 三 -上 
lim po (2) po ji 
lim pi (2) = p, = A 
t+ à +u 
6. 状态 空间 为 S = {10,1,2,…,n},k 二 0,1,2,…,n, 并 且 是 一 生 灭 过 程 , 生 灭 矩阵 为 
SA À 0 0 ss 0 
# “Uta À 0 ... 0 
0 2u = (AF 202 À ... 0 
Q= | : š š x 3 š 
0 0 0 (n—1)g — [à+ (n— 1)g] À 
0 0 0 0 ny 一 nu 
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由 Q 矩阵 得 绝对 概率 分 布 方程 为 


=— apo (+ pp (0 


e = 40. GJ — AF u) pi (D: 20, GD 


de, (O =b, (t) — Q F ku) pi) + (k + Dypt) (0 < k < n) 








=i ÀP mı GE) = np (t) 


— Abo + up: = 0 


àpi — Q F ku) pi + (k + Dype =0 (0 一 & 一 7) 


Ap, i — nap, = 0 
设 g, = Xp — kb, + W 
g: = àpia — kupi = àpi — (k + Dupri = gin 
go = 0,g, = 0 
因此 g: = 0,i = 0,1,2,--,n 





故 
p 一 pn 
Lipia 
h = Pai = yr (+ ) > 
EN 
h =g L) D 
WIA A a 1 ja v Liani 
HEDA = >P i+ 4 + 2 (2) Te J=: 
可 得 
L FN 
x (z) 
Ph = ” 1 I 0 < n 
名 于 (x) 
习题 6 
5.f.(z|B(s) = y) = l ap EN, es 


V 2nlt— s)o 2( 一 5S)o2 ` ° 
6. 证 明 因为 {B(o 渡 全 0)} {B 0),t > 0) 为 相互 独立 的 标准 Brown 运动 ,所 以 X(0) = 
B,(0) 一 B:(0) = 0,H X — Xv [BCD — B, (9] — [B,C — B, (s) 1. 
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由 Bi (£). B: (zt) 的 独立 平稳 增 量 性 可 知 ,{X(z) ,t 宇 0} 也 具有 独立 平稳 增 量 ， 
又 ELX()] = -i G)]— ELB: 0)] = 0,Var[ XG] = Var[B, (1)]+ Var[B: () J = 2t, B 
(XOD) 是 布朗 运 
7. 证 明 xT s < = 
Cov[ X6), XW] = A +90 +DCovlz( z) z) 


由 于 {2Z(2)) 与 {1B(7) 一 B(1)) At HP (BO) )} 是 Brown 运动 ,可 见 





Cov[XCD,X(O] = A+A +D (ColB (zy) Blr) l- —SCovx[Ba),B( L<) 


——co[B (+ ),B0)]+ Cov[B(G1) ,BC1)]} 


Em Ti 
s(1+¿)— s*$— s + s# = s(s < t) 
BUXO) 是 高 斯 过 程 ,ELX(z)] = 0, 故 {X(t)} 是 布朗 运动 . 

8. 考虑 随机 向 量 关 = (B(1),…,B(n)) ,由 于 {B(z)) 是 标准 Brown 运 动 ,所 以 外 服从 多 元 正 态 分 


EF 








布 ,具有 零 均 值 , 其 协 方差 矩阵 为 
t 1 1 1 1 1 T 
l 2 2 2 2 2 2 
5 34 2 š 3 3 3 3 
1 2 3 4 = n=2 n=l Nl 
l1 2 3 4 = m—2 n—1 n ),<n 


£ A= (1,1,…,1), 则 AX = BO) + BO) + =+ + BG) 是 具有 零 均值 的 随机 变量 ,方差 为 
aJa = OED 2 二 .又 因为 X(D) = BE) ,所 以 X(0) — 0, 于 是 





xw- XG) = IB (--)— B (--) 


(+) B (+ )+ B (+ )— sB (+) 


= dB(+)-B(+)]+u-9B(+)~ No, |t—s]) 








所 以 XO 是 独立 平稳 增 量 过 程 ,又 X(D) = B (E) ~ NOD UXO r > 0) 是 布朗 运动 
9. 因为 
EXW] = A- DELB(7 = )]=0 


A 


G 一 0 一 Dmin(T r) = (-D5,G <. 


UAX} 是 Gauss 过 程 ,均值 为 零 , 协 方差 为 sA 一 小 , 即 为 布朗 桥 . 
习题 7 
1. DELY] = E[XG + 1) — X()] 





Var[X(D] = efa -b7 )a=-92( 











D 
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= EL[X(t+1)]— E[ XG) ] 

=[a+B8G-+ 1)]—Ga+BË)= B 

结果 与 i 无关 . 

(2)Ry (t+ rt) = ELX(t+ r+1)— XG + r)] [XG + 1) — XW] 

= Ry(t+r+1,t+1)— Rx (t+r,t+1)—Rx(t+r+1,t)+Rx(t+r,t) 
3 

Rx( t) = Cx (ists) mx (ti )mx (t2) 

= ela] — (a+ ei) lat e), 

因此 ， 

Ry (t+ r,t) 一 2em21rl — elm] — eala] +E = 二 Ry (7) ,结果 与 1 无关. 
EL| Y 1] = Ry(0) = 2—2e +F <+ co. 

由 (1)、(2)、(3) AYO 为 平稳 过 程 . 








.EL[Y(n) Ym] = EL), Pyar a, X (h) XO] 


k=1 j=l 


= 5 Su, a,E[ X(#) XO] 
k=1 i=ì 


=F PeR. 


k=] i=] 


由 洛 弗 准则 知 ,如 果 Y(z) EJ Jy Wk W 
lim ELY(n) Y(m)] = C( 常 数 ) 


即 应 有 级 数 >， > a aR Cki) = c 一 十 co, 其 中 为 常数 ， 


. 由 均 方 变 上 限 积 分 的 性 质 知 
EET TE EE [mx oas 
dmo) a 

因此 ， 


Cx (s,t) = E[X'(s) — my (s) JLX' (Ci) — my (t)] 
= ELX OX WH] — my (s)my (t) 


= Rx (s,t) — my (s)my (t) 


= ZER G.D — melma] 


=L oG 
= CD. 
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